Zarządzanie danymi

Wprowadzenie do kultury danych

Anneleen Rummens

Data Scientist

Bazy danych: podstawowe pojęcia

System zarządzania bazą danych (DBMS): oprogramowanie do zarządzania bazami danych
Różne typy baz danych:
- Relacyjna vs. dokumentowa baza danych
- Hurtownia danych vs. data lake
Projektowanie i optymalizacja systemów baz danych to zazwyczaj zadanie inżyniera danych

Logo popularnych systemów DBMS

Przechowywanie danych w chmurze

Dane są przechowywane na zdalnych serwerach i dostępne przez Internet
Usługa świadczona przez wyspecjalizowany podmiot zewnętrzny
Opłacalne kosztowo, lecz bezpieczeństwo zależy od dostawcy

Logo popularnych dostawców chmury

Automatyzacja za pomocą potoków danych

Potoki przenoszą dane z jednej bazy danych do drugiej
Automatyczne zbieranie i przechowywanie w procesie ETL:
- Ekstrakcja
- Transformacja
- Ładowanie
Zapewnia dostępność aktualnych i dokładnych danych

Metalowe rury

Pobieranie danych z baz danych

Zapytania: dostęp i pobieranie danych
Zapytania w języku SQL (Structured Query Language)
Dalsza analiza w językach programowania, takich jak R lub Python

Ikony SQL, R i Python

Pulpity nawigacyjne

Prezentuje informacje na pierwszy rzut oka, np. kluczowe wskaźniki efektywności (KPI)
Odbiera dane z połączonej bazy danych
Dane są zazwyczaj prezentowane w formie wizualnej
Narzędzie wielofunkcyjne: służy też do analizy eksploracyjnej i komunikacji
Zazwyczaj tworzony i zarządzany przez analityka danych

Laptop z pulpitem nawigacyjnym prezentującym KPI i wykresy

Czas na ćwiczenia!

Wprowadzenie do kultury danych

Preparing Video For Download...