Data aanbieden

Inzicht in moderne data-architectuur

Miller Trujillo

Senior Software Engineer

Serving-laag

• Waar sla je verwerkte data op?
• Protocollen om die te gebruiken

Welke data hebben we?

• Welke data hebben we?
  • Is de data gestructureerd?
  • Is onze data een tijdreeks?
• Hoe wordt de data gebruikt?

• Datawarehouse
  • Geautomatiseerde rapporten/dashboards
  • BI/Data-analyse
  • Directe queries
• Blobopslag
• Tijdreeksdatabase
• NoSQL-database

Hoe wordt de data gebruikt?

• Datawarehouse
  • Geautomatiseerde rapporten/dashboards
  • BI/Data-analyse
  • Directe queries
• Machine Learning-modellen
• Applicaties
  • Samengevatte informatie
  • Individuele records
• Geen one size fits all!

Data aanbieden op basis van je use case

Systeem	Welk type data	Use case voor consumeren	Tools
Datawarehouse	Gestructureerde data, kan semi-gestructureerd aan	Analytische queries, BI/analytics, rapportage/dashboards	BigQuery, Redshift, Snowflake
Blobopslag	Alle typen data	ML-modellen met video/beeldverwerking, archivering	S3, Cloud Storage, Azure Storage
NoSQL-database	Semi-gestructureerd, tijdreeksen	API-blootstelling, hoge vraag	BigTable, DataStore, DynamoDB, CosmosDB
RDBMS	Gestructureerde data, kan semi-gestructureerd aan	Individuele records consumeren, API-blootstelling, lagere vraag	Postgres, MySQL, Oracle

Serving vs. consumeren

Laten we oefenen!

Inzicht in moderne data-architectuur