แหล่งข้อมูล

การจัดการข้อมูล AI อย่างรับผิดชอบ

Maria Prokofieva

Lead ML engineer

หัวข้อที่จะเรียน

  • ประเภทของแหล่งข้อมูล
  • ข้อจำกัดและการเลือกใช้
  • การรวมแหล่งข้อมูลหลายแหล่ง

ผู้คนหยิบเอกสารจากชั้นวาง ใช้แว่นขยายและค้นหาไฟล์ในฐานข้อมูลอิเล็กทรอนิกส์

การจัดการข้อมูล AI อย่างรับผิดชอบ

ทำไมแหล่งข้อมูลจึงสำคัญ

  • ความสมบูรณ์ของข้อมูล
  • ความหลากหลาย
  • การเป็นตัวแทนที่เป็นธรรม

การเตรียมแหล่งข้อมูล

1 Image by Streamline HQ
การจัดการข้อมูล AI อย่างรับผิดชอบ

ประเภทตามแหล่งกำเนิด

  • ข้อมูลปฐมภูมิ

    • ข้อมูลที่เก็บรวบรวมภายในโครงการ
    • การปฏิบัติตามกฎระเบียบและการขอความยินยอม

  • ข้อมูลทุติยภูมิ

    • ข้อมูลที่ได้มาจากแหล่งข้อมูลที่มีอยู่
    • ข้อตกลงการอนุญาตใช้งาน

แนวคิดนามธรรมของสัญญาอนุญาต

การจัดการข้อมูล AI อย่างรับผิดชอบ

ประเภทตามลักษณะของข้อมูล

  • เชิงปริมาณ

    • ข้อมูลตัวเลข

  • เชิงคุณภาพ

    • ข้อมูลที่ไม่ใช่ตัวเลข

  • แบบผสม

    • ผสมระหว่างตัวเลขและไม่ใช่ตัวเลข

ตัวเลขแปลงเป็นข้อความ

1 Image by Streamline HQ
การจัดการข้อมูล AI อย่างรับผิดชอบ

ประเภทตามมิติเวลา

  • แบบคงที่
    • ไม่เปลี่ยนแปลงตามเวลา
    • ข้อมูลสำมะโนประชากร
    • ที่อยู่องค์กร
  • แบบพลวัต
    • อัปเดตแบบเรียลไทม์
    • สตรีมโซเชียลมีเดีย
    • API
    • ฟีดตลาดการเงิน
    • ข้อมูลจากเซ็นเซอร์

การไหลแบบพลวัต

1 Image by Streamline HQ
การจัดการข้อมูล AI อย่างรับผิดชอบ

ความหลากหลายและความเป็นธรรมในแหล่งข้อมูล

  • อคติโดยตรงของผู้เก็บข้อมูล
  • การตรวจสอบอคติที่วัดได้
  • ไม่สะท้อนความเป็นจริงปัจจุบัน อคติที่ล้าสมัย
  • อคติที่สืบทอดมาจากบริบทต้นฉบับ
  • การวิเคราะห์เชิงละเอียด
  • เปลี่ยนแปลงอยู่เสมอ อาจนำอคติแบบเรียลไทม์เข้ามา
การจัดการข้อมูล AI อย่างรับผิดชอบ

โครงการการไหลของการจราจรในเมือง

แหล่งข้อมูล:

  • ข้อมูลการจราจรในอดีต
  • บันทึกการประชุมสภาเมือง
  • ข้อมูล GPS

โครงการการไหลของการจราจรในเมือง

1 Images by Streamline HQ
การจัดการข้อมูล AI อย่างรับผิดชอบ

ข้อมูลการจราจรในอดีต

  • กรมขนส่งของเมือง
  • ข้อมูลย้อนหลัง 5 ปี
  • รวมจำนวนยานพาหนะและช่วงเวลาของวัน/สัปดาห์

นี่คือ แหล่งข้อมูลเชิงปริมาณแบบคงที่ปฐมภูมิ

ข้อมูลการจราจร

1 Image by Streamline HQ
การจัดการข้อมูล AI อย่างรับผิดชอบ

รายงานการประชุมสภา

  • บันทึกสาธารณะที่เผยแพร่บนเว็บไซต์สภา
  • สรุปการวางผังเมืองและการจัดการจราจร

นี่คือ แหล่งข้อมูลเชิงคุณภาพทุติยภูมิ

รายงานการประชุม

1 Image by Streamline HQ
การจัดการข้อมูล AI อย่างรับผิดชอบ

ข้อมูล GPS

  • แหล่งข้อมูลปฐมภูมิแบบพลวัต
  • ให้ข้อมูลเชิงลึกทันทีเกี่ยวกับสภาพการจราจร ความเร็ว และความล่าช้า

GPS

1 Image by Streamline HQ
การจัดการข้อมูล AI อย่างรับผิดชอบ

มาฝึกกันเถอะ!

การจัดการข้อมูล AI อย่างรับผิดชอบ

Preparing Video For Download...