การสร้างไปป์ไลน์ที่เจาะจง
การนำเข้าข้อมูลและโมเดลเชิงความหมายด้วย Microsoft Fabric
Fiodar Sazanavets
Senior Software Engineer
ไปป์ไลน์คือเส้นทางที่วางแผนไว้
Source:
สถานีต้นทาง
Destination:
สถานีปลายทาง
Activities:
การดำเนินงานตามเส้นทาง
Run:
การเดินทางที่เสร็จสมบูรณ์หนึ่งครั้ง
การเริ่มไปป์ไลน์ใหม่
เริ่มจาก canvas เปล่าหรือใช้คำแนะนำ
Practice with sample data
ใช้เทมเพลตที่กำหนดไว้ล่วงหน้า
Pipeline canvas
Canvas แสดงกิจกรรมของไปป์ไลน์และการเชื่อมต่อกัน
แท็บ
Output
แสดงสถานะของกิจกรรม
กิจกรรม Copy data
กิจกรรมไปป์ไลน์ที่พบบ่อย
ทำงานคล้าย Copy job แต่กำหนดไว้ในไปป์ไลน์
อ่านจากแหล่งข้อมูล เขียนไปยังปลายทาง เช่น ตารางใน lakehouse
แท็บ
Run
แสดงรายละเอียดการรันและสถานะกิจกรรม
กลุ่มกิจกรรมของไปป์ไลน์
Move and transform:
คัดลอกหรือปรับรูปแบบข้อมูล
Control flow:
กำหนดว่าขั้นตอนใดทำงาน ในลำดับใด และกี่ครั้ง
Metadata and validation:
ตรวจสอบข้อมูลก่อนย้าย
Notifications:
ส่งข้อความและการแจ้งเตือน
พารามิเตอร์
กำหนดก่อนเริ่มการรัน
สามารถเปลี่ยนแหล่งข้อมูล วันที่ หรือปลายทาง
คงที่ตลอดการรันนั้น
กลายเป็นค่าป้อนเข้าที่นิพจน์ของกิจกรรมใช้
ตัวแปร
ค่าที่มีชื่อซึ่งกิจกรรมอ่านและอัปเดตได้
ต่างจากพารามิเตอร์ตรงที่สามารถเปลี่ยนแปลงระหว่างการรันได้
ตัวอย่าง: กำหนดค่าจากพารามิเตอร์ เก็บชื่อตารางชั่วคราว นับจำนวนไฟล์ที่ประมวลผลแล้ว
การเพิ่มพารามิเตอร์และตัวแปร
เลือกพื้นที่ว่างบน canvas
เปิดแท็บ
Parameters
หรือ
Variables
เลือก
+ New
แล้วป้อนชื่อและค่าเริ่มต้น
การเชื่อมต่อข้อมูลอย่างปลอดภัย
เลือกแหล่งข้อมูล
สร้างการเชื่อมต่อที่ปลอดภัย
การยืนยันตัวตนสำหรับการเชื่อมต่อที่ปลอดภัย
กำหนดข้อมูลรับรอง
ข้อมูลรับรองถูกเก็บเป็นความลับ ไม่ถูกจัดเก็บในพารามิเตอร์หรือตัวแปร
สองวิธีในการเริ่มไปป์ไลน์
การรันตามต้องการ
เริ่มด้วยตนเอง
เหมาะสำหรับการทดสอบหรืองานเร่งด่วน
การรันตามกำหนดเวลา
เริ่มโดยอัตโนมัติ
เหมาะสำหรับงานนำเข้าข้อมูลที่เกิดซ้ำ
การตรวจสอบการรันไปป์ไลน์
รันแล้วตรวจสอบข้อมูล ไม่ใช่แค่สถานะ
เปิดปลายทางจาก
OneLake catalog
ตรวจสอบว่าตารางหรือไฟล์ที่คาดไว้มีอยู่จริง
มาฝึกกันเถอะ!
การนำเข้าข้อมูลและโมเดลเชิงความหมายด้วย Microsoft Fabric
Preparing Video For Download...