Was ist Data Engineering?

Einführung in das Data Engineering

Vincent Vankrunkelsven

Data Engineer @ DataCamp

Was dich erwartet

  • Kapitel 1
    • Was ist Data Engineering?
  • Kapitel 2
    • Tools, die Dateningenieure nutzen
  • Kapitel 3
    • Extrahieren
    • Transformieren
    • Laden
  • Kapitel 4
    • Datenverarbeitung bei DataCamp!
Einführung in das Data Engineering

Das macht ein Dateningenieur

 

  • Daten sind verstreut
  • Nicht für Analysen optimiert
  • Alter Code führt zu fehlerhaften Daten

 

Dateningenieure kommen zur Rettung!

Ingenieurin

Abbildung des Datenbankschemas zur Darstellung verstreuter Daten

Bild, das einen Computerfehler darstellt

Einführung in das Data Engineering

Dateningenieure machen dein Leben einfacher

 

  • Sammelt Daten aus verschiedenen Quellen
  • Optimiert Datenbank für Analysen
  • Löscht beschädigte Daten

 

Das Leben des Data Scientists ist jetzt deutlich einfacher geworden!

 

Abbildung, das den Datenaufnahmeprozess darstellt

Einführung in das Data Engineering

Definition des Berufs

Ein Ingenieur, der Architekturen wie Datenbanken und große Verarbeitungssysteme entwickelt, baut, testet und wartet.

  • Verarbeitung großer Datenmengen
  • Verwendung von Maschinenclustern
Einführung in das Data Engineering

Dateningenieur vs. Data Scientists

Dateningenieur

  • Entwicklung einer skalierbaren Datenarchitektur
  • Vereinfachung der Datenerfassung
  • Einrichtung von Prozessen zur Datenzusammenführung
  • Bereinigung beschädigter Daten
  • Expertise in Cloud-Technologie

Data Scientist

  • Finden von Mustern in Daten
  • Statistische Modellierung
  • Erstellen von Vorhersagemodellen mit maschinellem Lernen
  • Überwachung von Geschäftsprozessen
  • Entfernung von Ausreißern
Einführung in das Data Engineering

Lass uns üben!

Einführung in das Data Engineering

Preparing Video For Download...