Основополагающие столпы

Основы управления данными

Sharon Omwega

Data Scientist

Архитектура как основа качественного проектирования

Архитектура данных включает модели, политики, правила и стандарты для информационных ресурсов
Фреймворки направляют разработку и внедрение, например TOGAF
Масштабируемость
Адаптивность
Гибкость
Соответствие политикам
Эффективное управление метаданными
Надёжная безопасность

Архитектурные чертежи на столе с циркулем, транспортиром, очками для чтения, ручкой и линейкой.

¹ Изображения в этом уроке созданы с использованием Freepik

Несколько ноутбуков, над которыми расположены логотипы облака и изображение базы данных с пунктирными линиями, символизирующими связность.

Интеграция данных объединяет разнородные источники данных
Это снижает избыточность, сложность и устраняет разрозненность данных
Включает ETL-процессы, репликацию данных, интеграцию в реальном времени

Люди сидят и стоят рядом с увеличенным ноутбуком, часами и мобильным телефоном, глядя на свои устройства.

Интеграция в реальном времени использует потоковые источники данных, промежуточное ПО и специализированные инструменты
Важно отслеживать качество данных, задержку, объём и доступность системы
Время получения данных должно быть минимальным

Синий экран с синим фоном и диаграммой, представляющей пример модели данных.

Включает определение требований к данным и создание моделей данных
Типы моделей: концептуальная, логическая, физическая
Модели, как правило, содержат сущности и атрибуты
Моделирование данных — итеративный процесс, развивающийся вместе с требованиями

Управление базами данных и хранилищами охватывает организацию, оптимизацию и защиту репозиториев данных
Включает внедрение DBMS
Предусматривает эффективное индексирование, сжатие данных и стратегии архивирования

Мужчина с ноутбуком на фоне баз данных и облака, символизирующего хранилище данных.

Основы управления данными