資料有限時的重抽樣

Advanced Probability: Uncertainty in Data

Maarten Van den Broeck

Senior Content Developer at DataCamp

什麼是重抽樣?

  • 每種顏色有多少玻璃球?
  • 不數出來的估計法
  • 解法:重複抽樣並記錄顏色

一罐裝滿玻璃球

Advanced Probability: Uncertainty in Data

重抽樣技術

  • Bootstrapping
  • 交叉驗證
  • 合成抽樣
Advanced Probability: Uncertainty in Data

Bootstrapping

Bootstrapping 示意圖

Advanced Probability: Uncertainty in Data

交叉驗證

交叉驗證示意圖

Advanced Probability: Uncertainty in Data

合成重抽樣

合成重抽樣示意圖

Advanced Probability: Uncertainty in Data

範例:偵測詐騙

  • 詐騙交易很少見
    • 模型把所有交易都判為安全
  • 產生合成詐騙案例
    • 模型可學到詐騙樣式

使用卡片與筆電的人

Advanced Probability: Uncertainty in Data

範例:偵測詐騙

  • 初始情況:

    • 每月 1,000,000 筆交易
    • 1,000 筆或 0.1% 被標為詐騙
  • 合成抽樣:

    • 將詐騙樣本提高到 10,000 筆或 1%

使用卡片與筆電的人

Advanced Probability: Uncertainty in Data

一起來練習吧!

Advanced Probability: Uncertainty in Data

Preparing Video For Download...