Omsampling vid begränsad data

Avancerad sannolikhetslära: Osäkerhet i data

Maarten Van den Broeck

Senior Content Developer at DataCamp

Vad är omsampling?

  • Hur många kulor av varje färg?
  • Uppskatta utan att räkna
  • Lösning: ta upprepade urval och notera färger

En burk full med kulor

Avancerad sannolikhetslära: Osäkerhet i data

Omsamplingstekniker

  • Bootstrapping
  • Korsvalidering
  • Syntetisk sampling
Avancerad sannolikhetslära: Osäkerhet i data

Bootstrapping

Illustration av bootstrapping

Avancerad sannolikhetslära: Osäkerhet i data

Korsvalidering

Illustration av korsvalidering

Avancerad sannolikhetslära: Osäkerhet i data

Syntetisk omsampling

Illustration av syntetisk omsampling

Avancerad sannolikhetslära: Osäkerhet i data

Exempel: bedrägeridetektering

  • Bedrägliga transaktioner är sällsynta
    • Modeller förutsäger alla transaktioner som säkra
  • Generera syntetiska bedrägerifall
    • Modellen kan lära sig bedrägeriemönster

Person som använder ett kort och en bärbar dator

Avancerad sannolikhetslära: Osäkerhet i data

Exempel: bedrägeridetektering

  • Utgångsläge:

    • 1 000 000 transaktioner per månad
    • 1 000 eller 0,1 % klassificerade som bedrägliga
  • Syntetisk sampling:

    • Öka bedrägliga urval till 10 000 eller 1 %

Person som använder ett kort och en bärbar dator

Avancerad sannolikhetslära: Osäkerhet i data

Nu kör vi en övning!

Avancerad sannolikhetslära: Osäkerhet i data

Preparing Video For Download...