Dataflow Gen2 से डेटा ट्रांसफॉर्म और लोड करना

Microsoft Fabric में Data Ingestion और Semantic Models

Fiodar Sazanavets

Senior Software Engineer

फ़िल्टर लगाना

Status कॉलम फ़िल्टर, Canceled हटाया गया और Completed चुना हुआ

  • ट्रांसफॉर्मेशन ज़रूरतों से तय हों
  • डेटा प्रीव्यू में प्रति कॉलम फ़िल्टर कर सकते हैं
    • कॉलम मानों के आधार पर पंक्तियाँ हटती हैं
Microsoft Fabric में Data Ingestion और Semantic Models

कस्टम कॉलम जोड़ना

  • वैल्यू निकालने के लिए कस्टम कॉलम जोड़ें
  • Revenue = [Quantity] * [UnitPrice]

कस्टम कॉलम डायलॉग, Revenue = Quantity × UnitPrice, Decimal number टाइप

Microsoft Fabric में Data Ingestion और Semantic Models

क्वेरी में डेस्टिनेशन जोड़ना

Dataflow Gen2 एडिटर, Query settings के नीचे Data destination प्लस बटन

  • ट्रांसफॉर्म्ड आउटपुट कहाँ जाएगा
  • Query settings में Data destination के पास +
  • Lakehouse, warehouse, या और सपोर्टेड स्टोर्स
Microsoft Fabric में Data Ingestion और Semantic Models

डेस्टिनेशन को कौन कंट्रोल करे

  • Use automatic settings On: Fabric मैपिंग, रिप्लेसमेंट, और स्कीमा मैनेज करता है
  • नई, दोबारा बनने वाली टेबल के लिए उपयुक्त
  • टेबल रिक्रिएट होने पर रिलेशनशिप या measures हट सकते हैं
  • Off: append, fixed schema, या मौजूदा टेबल के लिए मैनुअल कंट्रोल

डेस्टिनेशन सेटिंग्स चुनें, Use automatic settings ऑन और Fabric-मैनेज्ड कॉलम मैपिंग OrderID और OrderDate के लिए

Microsoft Fabric में Data Ingestion और Semantic Models

डेस्टिनेशन क्या रखे, तय करना

Append

  • पहले की पंक्तियाँ रखता है, करंट आउटपुट जोड़ता है
  • स्कीमा बदल नहीं सकता

Replace

  • करंट आउटपुट से फिर से बनाता है
  • Fixed स्कीमा कॉलम रखता है; Dynamic टेबल फिर रिक्रिएट करता है
  • सोर्स कॉलम बदलें तो मैपिंग रिव्यू करें

मैनुअल डेस्टिनेशन सेटिंग्स, Update method Replace पर, Dynamic schema चुना हुआ, और नीचे कॉलम मैपिंग

Microsoft Fabric में Data Ingestion और Semantic Models

Refresh तैयार डेटा को करंट रखता है

वर्कस्पेस में Dataflow आइटम मेन्यू, Refresh now और Recent runs हाइलाइटेड

  • सोर्स डेटा बदलता है; आउटपुट पुराने हो जाते हैं
  • Refresh सेव किए गए extract, transform, load स्टेप्स फिर चलाता है
  • क्वेरी दोहराता है, redesign नहीं
  • हर रन को success या failure के लिए मॉनिटर करें
Microsoft Fabric में Data Ingestion और Semantic Models

कब और कितना रिफ्रेश करें

  • Refresh ट्रिगर्स:
    • On-demand: अभी शुरू करें
    • Scheduled: चुने दिन और समय
  • Refresh प्रकार:
    • Full: सब दोबारा प्रोसेस; छोटी या बदलती टेबलें
    • Incremental: समय-आधारित बकेट; बड़े डेटा में भरोसेमंद date-time कॉलम हो

Dataflow शेड्यूल, साप्ताहिक सोमवार 12:00 PM पर रिपीट सेट

1 https://learn.microsoft.com/en-us/fabric/data-factory/dataflow-gen2-incremental-refresh
Microsoft Fabric में Data Ingestion और Semantic Models

अभ्यास करते हैं!

Microsoft Fabric में Data Ingestion और Semantic Models

Preparing Video For Download...