Selezione delle fonti dati

Gestione responsabile dei dati per l'AI

Maria Prokofieva

Lead ML engineer

Perché selezionare?

Assicurare la qualità dei dati
Conformità legale
Equità

Donna perplessa che sceglie tra due pulsanti e preme quello blu

Passo 1. Rilevanza del progetto

Rilevanza per gli obiettivi del progetto
Verifica l’allineamento con
- Tema
- Ambito
- Risultati attesi

Icona bersaglio

Passo 2. Integrità della fonte dati

Valuta integrità e affidabilità
Recensioni e testimonianze
Trasparenza nella raccolta dati
Conformità e licenze
Alta qualità: aggiornamenti regolari

Icona stretta di mano e scudo

Passo 3. Conformità legale

Liceità dei dati
Conformità legale del progetto
Consulenza legale:
- Leggi e restrizioni applicabili
- Anonimizzazione dei dati
- Requisiti di sicurezza dei dati
Approvato dal team legale

leggi

Passo 4. Qualità tecnica

Integrità strutturale e usabilità
Completi
Coerenti
Accurate
Tempestivi

Certificato di qualità

Passo 5. Bias e rappresentatività

Analisi della rappresentanza demografica
Caratteristiche protette
Analizza la distribuzione dei gruppi
Metriche di equità
Data augmentation

Passo 6. Selezione

Includi se:
- Si allinea in modo costante
- Correggibile con trasformazioni, augmentation o algoritmi
Escludi se:
- Carente in aree chiave
Consulta esperti di dominio

Fare una selezione

Progetto: flusso del traffico urbano

Fonti dati:

Dati di conteggio del traffico
Verbali delle riunioni del consiglio
Dati GPS
Menzioni sui social sulle condizioni del traffico
Dati dei sondaggi dei pendolari

Progetto sul flusso del traffico urbano

¹ Immagini di Streamline HQ

Progetto: flusso del traffico urbano

Escludi:

Dati dei social media
Dati dei sondaggi dei pendolari

Modifiche:

Verbali delle riunioni del consiglio
Dati di conteggio del traffico
- Dati aggiuntivi dai sensori
Dati GPS
- Dati aggiuntivi dalle telecamere

Ayo berlatih!

Gestione responsabile dei dati per l'AI

Preparing Video For Download...