Servirea datelor

Înțelegerea arhitecturii moderne a datelor

Miller Trujillo

Senior Software Engineer

Stratul de servire

• Unde se stochează datele procesate
• Protocoale de consum

Ce date avem?

• Ce date avem?
  • Datele sunt structurate?
  • Datele sunt serii de timp?
• Cum vor fi consumate datele?

• Data Warehouse
  • Raportare/Dashboarding automatizat
  • BI/Analiză de date
  • Interogări directe
• Stocare Blob
• Bază de date de serii de timp
• Bază de date NoSQL

Cum vor fi consumate datele?

• Data warehouse
  • Raportare/dashboarding automatizat
  • BI/Analiză de date
  • Interogări directe
• Modele de machine learning
• Aplicații
  • Informații sumarizate
  • Înregistrări individuale
• Nu există o soluție universală!

Servirea datelor în funcție de cazul de utilizare

Sistem	Tipul de date	Caz de utilizare	Instrumente
Data warehouse	Date structurate, poate gestiona date semi-structurate	Interogări analitice, BI/Analiză, raportare/dashboards	BigQuery, Redshift, Snowflake
Stocare Blob	Orice tip de date	Modele ML cu procesare video/imagini, arhivare	S3, Cloud Storage, Azure Storage
Bază de date NoSQL	Date semi-structurate, serii de timp	Expunere API, cerere ridicată	BigTable, DataStore, DynamoDB, CosmosDB
RDBMS	Date structurate, poate gestiona date semi-structurate	Consum înregistrări individuale, expunere API, cerere redusă	Postgres, MySQL, Oracle

Servire vs. Consum

Să exersăm!

Înțelegerea arhitecturii moderne a datelor