การนำเข้าข้อมูลและ semantic model ด้วย Microsoft Fabric

การนำเข้าข้อมูลและโมเดลเชิงความหมายด้วย Microsoft Fabric

Fiodar Sazanavets

Senior Software Engineer

รู้จักกับผู้สอน

Fiodar Sazanavets

Microsoft MVP

  • Fiodar Sazanavets
  • อดีตวิศวกรซอฟต์แวร์อาวุโสที่ Microsoft
  • Microsoft MVP ด้านเทคโนโลยีการพัฒนา
การนำเข้าข้อมูลและโมเดลเชิงความหมายด้วย Microsoft Fabric

ข้อกำหนดเบื้องต้น

รายการเช็กลิสต์ที่ติ๊กไว้ 4 รายการพร้อมปากกา

การนำเข้าข้อมูลและโมเดลเชิงความหมายด้วย Microsoft Fabric

เป้าหมายของคอร์ส

  • เลือกรูปแบบการนำเข้าข้อมูลเข้า Fabric
  • แปลงข้อมูลด้วย Dataflow Gen2
  • ออกแบบ semantic model สำหรับการวิเคราะห์
  • รักษาความปลอดภัย รีเฟรช และปรับประสิทธิภาพโมเดล

สองขั้นตอนของคอร์ส: นำเข้าข้อมูลด้วย Copy job, Pipeline, Dataflow Gen2, Shortcut และ Mirroring จากนั้นสร้างโมเดลด้วย semantic model การรักษาความปลอดภัย การรีเฟรช และประสิทธิภาพ

การนำเข้าข้อมูลและโมเดลเชิงความหมายด้วย Microsoft Fabric

Fabric นำเข้าข้อมูลอย่างไร

  • Copy job / pipeline: คัดลอกหรือจัดการขั้นตอนการโหลดข้อมูล
  • Dataflow Gen2: แปลงข้อมูลระหว่างนำเข้า
  • Shortcut: อ้างอิงข้อมูลโดยไม่ต้องคัดลอก
  • Mirroring: จำลองแหล่งข้อมูลที่รองรับ
  • Eventstream: สตรีมเหตุการณ์ต่อเนื่อง

เส้นทางเข้าสู่ OneLake 6 แบบ: Copy job, Pipeline, Dataflow Gen2, Shortcut, Mirroring และ Eventstream

การนำเข้าข้อมูลและโมเดลเชิงความหมายด้วย Microsoft Fabric

สร้างรายการแรกใน Fabric

  • เวิร์กสเปซเก็บรายการที่สร้างขึ้นในแต่ละแบบฝึกหัด
  • เลือก + New item ในเวิร์กสเปซ

แถบเครื่องมือเวิร์กสเปซพร้อมปุ่ม + New item

  • ค้นหาและเลือก Copy job

 

หน้าต่าง New item พร้อมพิมพ์ Copy ในช่องค้นหา และผลลัพธ์ Copy job

การนำเข้าข้อมูลและโมเดลเชิงความหมายด้วย Microsoft Fabric

ฝึกใช้งานด้วยข้อมูลตัวอย่าง

  • ใช้ข้อมูลตัวอย่างจากเมนูด้านบน (อยู่ใต้ ... บนหน้าจอขนาดเล็ก)
  • ฝึกขั้นตอนการทำงานก่อนเชื่อมต่อกับแหล่งข้อมูลจริง

 

หน้าต่างตัวช่วยสร้าง Copy job ที่ขั้นตอน Choose data source โดยไฮไลต์ Sample data ในรายการเมนูด้านบน

การนำเข้าข้อมูลและโมเดลเชิงความหมายด้วย Microsoft Fabric

คัดลอกข้อมูลด้วย Copy job

 

ขั้นตอน Map to destination ของ Copy job กำลังแมปตารางต้นทาง Diabetes ไปยังปลายทาง dbo.Diabetes

  • การนำเข้าข้อมูลสู่ Fabric ด้วยตัวช่วยสร้าง
  • เลือกแหล่งข้อมูลและปลายทางใน Fabric
  • วิธีอ่านข้อมูล: คัดลอกทั้งหมดหรือแบบเพิ่มขึ้น
  • แมปไปยังสคีมาและตาราง เช่น dbo.Diabetes
  • รันตามต้องการหรือตามกำหนดเวลา
การนำเข้าข้อมูลและโมเดลเชิงความหมายด้วย Microsoft Fabric

เลคเฮาส์ในฐานะปลายทางการคัดลอกข้อมูล

  • ปลายทางการคัดลอกข้อมูลทั่วไป
  • Explorer จัดระเบียบตารางและไฟล์
  • เปิดไฟล์เพื่อดูโครงสร้างที่แตกต่างกัน

Explorer ของเลคเฮาส์ LH_TripStore ที่มีส่วน Tables และ Files โดยเปิดส่วน Files แสดงรายการโฟลเดอร์ puYear

การนำเข้าข้อมูลและโมเดลเชิงความหมายด้วย Microsoft Fabric

รูปแบบไฟล์ใน Lakehouse

  • รูปแบบไฟล์ทั่วไปในเลคเฮาส์:
    • CSV: ข้อความคั่นด้วยตัวคั่น
    • Parquet: พื้นที่จัดเก็บเชิงวิเคราะห์แบบคอลัมน์
    • JSON: ข้อมูลกึ่งโครงสร้าง

มุมมอง Files ของเลคเฮาส์ที่แสดงไฟล์ CSV และ Parquet

การนำเข้าข้อมูลและโมเดลเชิงความหมายด้วย Microsoft Fabric

ข้อมูลตัวอย่างใน Lakehouse

  • ใช้ได้ในเลคเฮาส์ที่ว่างเปล่า
  • สร้างสิ่งต่อไปนี้ให้อัตโนมัติ:
    • ไฟล์
    • ตาราง

การ์ด Start with sample data ในเลคเฮาส์ที่ว่างเปล่า: "นำเข้าตารางที่มีข้อมูลตัวอย่างโดยอัตโนมัติ"

การนำเข้าข้อมูลและโมเดลเชิงความหมายด้วย Microsoft Fabric

มาฝึกกันเถอะ!

การนำเข้าข้อมูลและโมเดลเชิงความหมายด้วย Microsoft Fabric

Preparing Video For Download...