data warehouse มีเลเยอร์อะไรบ้าง?

แนวคิด Data Warehousing

Aaren Stubberfield

Data Scientist

ภาพรวมเลเยอร์ - แหล่งข้อมูล

ภาพรวมเลเยอร์ - data staging

ภาพรวมเลเยอร์ - การจัดเก็บข้อมูล

ภาพรวมเลเยอร์ - การนำเสนอข้อมูล

เลเยอร์แหล่งข้อมูล

• แหล่งข้อมูลทั้งหมดสำหรับ data warehouse

• ตัวอย่างแหล่งข้อมูล:

  • ฐานข้อมูลธุรกรรม
  • ไฟล์ log
  • สเปรดชีต

เลเยอร์ data staging

• เลเยอร์นี้ดึง แปลง และทำความสะอาดข้อมูลผ่านกระบวนการ ETL
• ประกอบด้วยกระบวนการ ETL และตารางจัดเก็บข้อมูล

กระบวนการ ETL ใน data staging layer

• ดึงข้อมูล
• ใช้กฎทางธุรกิจและทำความสะอาดข้อมูล
• มักใช้ staging database
• ต้องสามารถดึงข้อมูลที่ถูกต้องได้
• โหลดแบบ batch / full

เลเยอร์จัดเก็บข้อมูล

• ข้อมูลถูกจัดเก็บใน warehouse และ data mart
  • Data warehouse -> Data mart
  • Data mart -> Data warehouse

เลเยอร์นำเสนอข้อมูล

• ผู้ใช้งานโต้ตอบกับข้อมูลที่จัดเก็บไว้
• ผู้ใช้งาน:
  • ใช้เครื่องมือ BI (Business Intelligence)
  • ใช้เครื่องมือ data mining
  • สร้างคิวรีโดยตรง

สรุป

มาฝึกกันเถอะ!

แนวคิด Data Warehousing