Управление данными

Введение в грамотность работы с данными

Anneleen Rummens

Data Scientist

Базы данных: основные понятия

  • Система управления базами данных (СУБД): программное обеспечение для управления базами данных

  • Различные типы баз данных:

    • Реляционная база данных и документная база данных
    • Хранилище данных и озеро данных

  • Проектирование и оптимизация систем баз данных — как правило, ответственность инженера по данным

Логотипы распространённых СУБД

Введение в грамотность работы с данными

Хранение данных в облаке

  • Данные хранятся на удалённых серверах и доступны через Интернет
  • Услугу предоставляет специализированный сторонний провайдер
  • Экономично, но безопасность зависит от третьей стороны

Логотипы популярных облачных провайдеров

Введение в грамотность работы с данными

Автоматизация с помощью пайплайнов данных

  • Пайплайны перемещают данные из одной базы в другую
  • Автоматизированный сбор и хранение через процесс ETL:
    • Извлечение
    • Преобразование
    • Загрузка
  • Обеспечивает доступность актуальных и точных данных

Металлические трубы

Введение в грамотность работы с данными

Получение данных из баз данных

  • Запросы: доступ к данным и их извлечение
  • Запросы с помощью языка структурированных запросов (SQL)
  • Дальнейший анализ на языках программирования, таких как R или Python

Иконки SQL, R и Python

Введение в грамотность работы с данными

Дашборды

  • Отображает ключевые показатели эффективности (KPI) и другие метрики
  • Получает данные из подключённой базы данных
  • Данные, как правило, представлены в наглядном визуальном формате
  • Многофункциональный инструмент: используется для разведочного анализа и представления данных
  • Обычно создаётся и поддерживается аналитиком данных

Ноутбук с дашбордом, отображающим KPI и графики

Введение в грамотность работы с данными

Давайте потренируемся!

Введение в грамотность работы с данными

Preparing Video For Download...