การรวมข้อมูล

การออกแบบฐานข้อมูล

Lis Sulmont

Curriculum Manager

Data Integration คืออะไร

 

 

 

การรวมข้อมูล (Data Integration) คือการนำข้อมูลจากแหล่ง รูปแบบ และเทคโนโลยีที่แตกต่างกันมารวมกัน เพื่อให้ผู้ใช้เห็นข้อมูลในมุมมองที่แปลงแล้วและเป็นหนึ่งเดียว

การออกแบบฐานข้อมูล

ตัวอย่างกรณีทางธุรกิจ

  • มุมมองลูกค้า 360 องศา
  • การซื้อกิจการ
  • ระบบเดิม (Legacy systems)
การออกแบบฐานข้อมูล

Unified Data Model

ไอคอนฐานข้อมูลแทน Unified Data Model

การออกแบบฐานข้อมูล

แหล่งข้อมูล

แหล่งข้อมูล 3 แหล่งที่ยังไม่เชื่อมต่อกับ Unified Data Model

การออกแบบฐานข้อมูล

รูปแบบแหล่งข้อมูล

แหล่งข้อมูล 3 แหล่งที่ยังไม่เชื่อมต่อกับ Unified Data Model และมีรูปแบบข้อมูลต่างกัน

การออกแบบฐานข้อมูล

รูปแบบ Unified Data Model

แหล่งข้อมูล 3 แหล่งที่มีรูปแบบต่างกันและยังไม่เชื่อมต่อกับ Unified Data Model ซึ่งเป็น Redshift data warehouse

การออกแบบฐานข้อมูล

ตัวอย่าง: DataCamp

แหล่งข้อมูล 3 แหล่งที่มีรูปแบบต่างกันและมาจากต่างแผนก ยังไม่เชื่อมต่อกับ Unified Data Model ซึ่งเป็น Redshift data warehouse

การออกแบบฐานข้อมูล

ความถี่การอัปเดต - ยอดขาย

แหล่งข้อมูลทั้ง 3 แหล่งที่อัปเดตทุกวัน

การออกแบบฐานข้อมูล

ความถี่การอัปเดต - การจราจรทางอากาศ

แหล่งข้อมูลทั้ง 3 แหล่งที่อัปเดตแบบเรียลไทม์

การออกแบบฐานข้อมูล

ความถี่การอัปเดตที่แตกต่างกัน

แหล่งข้อมูลทั้ง 3 แหล่งที่อัปเดตในเวลาต่างกัน

การออกแบบฐานข้อมูล

ง่ายมากเลยหรือ?

แหล่งข้อมูลทั้ง 3 แหล่งเชื่อมต่อกับ Unified Data Model

การออกแบบฐานข้อมูล

ไม่ง่ายอย่างนั้น

แหล่งข้อมูลทั้ง 3 แหล่งที่อัปเดตทุกวัน พร้อมเครื่องหมาย X ขนาดใหญ่ทับอยู่

การออกแบบฐานข้อมูล

การแปลงข้อมูล

แหล่งข้อมูลทั้ง 3 แหล่งที่ถูกแปลงเพื่อให้เข้ากับ Unified Data Model

การออกแบบฐานข้อมูล

การแปลงข้อมูล - เครื่องมือ

การประมวลผลแหล่งข้อมูลทั้ง 3 แหล่งผ่าน ETL ไปยัง Unified Data Model

การออกแบบฐานข้อมูล

การเลือกเครื่องมือสำหรับ Data Integration

  • ยืดหยุ่น
  • เชื่อถือได้
  • รองรับการขยาย
การออกแบบฐานข้อมูล

การทดสอบอัตโนมัติและการแจ้งเตือนเชิงรุก

ไดอะแกรม ETL พร้อมไอคอนการทดสอบในแต่ละขั้นตอน

การออกแบบฐานข้อมูล

ความปลอดภัย

ไดอะแกรม ETL แสดงส่วนของข้อมูลที่ควรถูกจำกัดสิทธิ์จากต้นทางไปยังปลายทาง

การออกแบบฐานข้อมูล

ความปลอดภัย - การปิดบังข้อมูลบัตรเครดิต

ไดอะแกรม ETL พร้อมการปิดบังข้อมูลบัตรเครดิต

การออกแบบฐานข้อมูล

Data Governance - Lineage

ไดอะแกรม ETL พร้อมเส้นแสดงการไหลของข้อมูลจากต้นทางไปยังปลายทาง

การออกแบบฐานข้อมูล

มาฝึกกันเถอะ!

การออกแบบฐานข้อมูล

Preparing Video For Download...