การจัดการ Metadata

ทำความเข้าใจสถาปัตยกรรมข้อมูลสมัยใหม่

Miller Trujillo

Senior Software Engineer

Metadata คืออะไร?

  • ข้อมูลที่อธิบายข้อมูลอื่น

ตัวอย่าง Metadata โดยใช้หนังสือ

ทำความเข้าใจสถาปัตยกรรมข้อมูลสมัยใหม่

ประเภทของ Metadata

ประเภท Metadata ตัวอย่างข้อมูล ตัวอย่างแคตตาล็อกหนังสือ
Technical metadata ชนิดข้อมูล, ความสัมพันธ์, ชื่อคอลัมน์, แหล่งข้อมูล ISBN, จำนวนหน้าของหนังสือ
Business metadata คำจำกัดความทางธุรกิจ, กฎ, เจ้าของข้อมูล ชื่อ, ผู้แต่ง, สำนักพิมพ์, ประเภทหนังสือ
Operational metadata Timestamp, สถานะ ETL job, เมตริกคุณภาพข้อมูล วันที่รับหนังสือ, สภาพของหนังสือ
Usage metadata ผู้เข้าถึงข้อมูล, เวลา, และวิธีการใช้งาน ผู้ยืมหนังสือ, เวลา, และระยะเวลาที่ยืม
ทำความเข้าใจสถาปัตยกรรมข้อมูลสมัยใหม่

จะเก็บ Metadata ไว้ที่ไหน?

GCP Data Catalog

  • บริการ Metadata แบบ Managed
  • เชื่อมต่อกับบริการ GCP
  • รองรับการลงทะเบียน Metadata ภายนอก

AWS Glue Catalog

  • ที่เก็บ Metadata ส่วนกลาง
  • เชื่อมต่อกับบริการ AWS
  • Crawler สามารถจัดทำแคตตาล็อกข้อมูลภายนอกได้

Data Catalog อื่นๆ

  • Azure Data Catalog
  • Apache Atlas
  • CKAN

 

  • Datahub
  • Collibra
  • ...
ทำความเข้าใจสถาปัตยกรรมข้อมูลสมัยใหม่

มาฝึกกันเถอะ!

ทำความเข้าใจสถาปัตยกรรมข้อมูลสมัยใหม่

Preparing Video For Download...