Що таке сучасна дата-архітектура?

Розуміння сучасної архітектури даних

Miller Trujillo

Senior Software Engineer

Що ми вивчимо?

  • Сучасні дата-архітектури
  • Різні типи дата-архітектур
  • Компоненти
    • Від надходження до надання
    • Управління даними
    • Оркестрація
  • Спроєктуйте сучасне рішення з даними
Розуміння сучасної архітектури даних

Сучасні дата-архітектури

Характеристика Сучасна дата-архітектура Традиційна дата-архітектура
Обсяг і різноманіття Величезні обсяги й численні формати Менші обсяги структурованих даних
Зберігання Озера даних, NO-SQL, сховище даних Реляційні БД, сховище даних
Підхід до обробки Обробка в реальному чи майже реальному часі Лише пакетна
Масштабованість і гнучкість Хмарні рішення Інвестиції в апаратне забезпечення
Демократизація Інструменти самообслугової аналітики Сильна залежність від IT-відділів
Розуміння сучасної архітектури даних

Вимоги до сучасних дата-архітектур

  • Гнучкість і розширюваність
  • Використовує хмарні платформи для масштабування
  • Обробляє зростальні обсяги даних
  • Критичні бізнес-процеси
    • Білінг
  • Інтегрує розподілені домени
  • Управління даними та безпека
1 https://www.ibm.com/resources/the-data-differentiator/data-architecture
Розуміння сучасної архітектури даних

Компоненти

  • Джерела даних
  • Надходження даних
  • Зберігання даних
  • Обробка даних
  • Оркестрація даних
  • Управління даними та безпека

Типова big data-архітектура: джерела, зберігання, пакетна й потокова обробка, оркестрація, аналітичне сховище та звітність

1 https://learn.microsoft.com/en-us/azure/architecture/guide/architecture-styles/big-data
Розуміння сучасної архітектури даних

Давайте потренуємось!

Розуміння сучасної архітектури даних

Preparing Video For Download...