Wat is moderne data-architectuur?

Moderne data-architectuur begrijpen

Miller Trujillo

Senior Software Engineer

Wat gaan we leren?

  • Moderne data-architecturen
  • Soorten data-architecturen
  • Componenten
    • Van ingest tot serving
    • Data governance
    • Orchestratie
  • Ontwerp een moderne datasolution
Moderne data-architectuur begrijpen

Moderne data-architecturen

Kenmerk Moderne data-architectuur Traditionele data-architectuur
Volume en variatie Enorme volumes, meerdere formats Kleinere volumes, gestructureerd
Opslag Data lakes, NoSQL, datawarehouse Relationele db’s, datawarehouse
Verwerkingsaanpak Real-time of near real-time Alleen batch
Schaalbaarheid/flexibiliteit Cloudoplossingen Hardware-investeringen
Democratisering Selfservice-analysetools Sterke afhankelijkheid van IT
Moderne data-architectuur begrijpen

Eisen voor moderne data-architecturen

  • Flexibel en uitbreidbaar
  • Schaalbaar via cloudplatforms
  • Kan groeiende datavolumes aan
  • Kritieke bedrijfsprocessen
    • Facturatie
  • Integreert gedistribueerde domeinen
  • Data governance en security
1 https://www.ibm.com/resources/the-data-differentiator/data-architecture
Moderne data-architectuur begrijpen

Componenten

  • Databronnen
  • Data-ingestie
  • Dataopslag
  • Dataverwerking
  • Data-orchestratie
  • Data governance en security

Generieke bigdata-architectuur met databronnen, opslag, batch- en streamverwerking, orchestratie, en analytics-opslag en rapportage

1 https://learn.microsoft.com/en-us/azure/architecture/guide/architecture-styles/big-data
Moderne data-architectuur begrijpen

Laten we oefenen!

Moderne data-architectuur begrijpen

Preparing Video For Download...