ยินดีด้วย

Data Engineering เบื้องต้น

Vincent Vankrunkelsven

Data Engineer @ DataCamp

แนะนำการวิศวกรรมข้อมูล

 

• ระบุงานของวิศวกรข้อมูล
• เครื่องมือที่ใช้
• ผู้ให้บริการ Cloud

กล่องเครื่องมือวิศวกรรมข้อมูล

 

• ฐานข้อมูล
• การประมวลผลแบบขนานและ Framework (Spark)
• การจัดตารางงานด้วย Airflow

Extract, Load and Transform (ETL)

 

• Extract: ดึงข้อมูลจากหลายแหล่ง
• Transform: แปลงข้อมูลด้วยการประมวลผลแบบขนาน
• Load: โหลดข้อมูลลงฐานข้อมูลเป้าหมาย

กรณีศึกษา: DataCamp

 

• ดึงข้อมูลจากหลายแหล่ง
• แปลงข้อมูลเพื่อสร้างคำแนะนำ
• โหลดลงฐานข้อมูลเป้าหมาย

ทำได้ดีมาก!

Data Engineering เบื้องต้น