Limitações da fonte de dados

Gestão Responsável de Dados em IA

Maria Prokofieva

Lead ML Engineer

Fonte de dados e limitações comuns

Conformidade legal
Viés
Metodologia
Papel do conhecimento de domínio

Limitações legais e de acesso

Uso restrito dos dados para certos tipos de projeto
Requisitos extras de conformidade
Custo proibitivo

Conformidade de dados

¹ Imagem por Streamline HQ

Viés em fontes de dados

Erros sistemáticos
Percepções distorcidas
Resultados desiguais
Prejudicam certos grupos

Tipos de viés

Viés histórico:
- Padrões e resultados irrelevantes
Viés de seleção:
- Escolha de quais pontos incluir
Viés de amostragem
- Método usado para amostrar

Escala de viés

¹ Imagem por Streamline HQ

Vieses e limitações pela origem

Cobertura de dados limitada
Restrições culturais e geográficas
Escopo e inclusão restritos

Grupo de pessoas

Vieses e limitações pela metodologia

Escolha dos métodos de coleta
Abordagens de amostragem

Mãos multicoloridas com palmas abertas, erguidas

Conhecimento de domínio

Limitações ou vieses ocultos
Envolva especialistas do domínio cedo
Mitigue limitações antes da modelagem

Projeto de fluxo de tráfego urbano

Fontes de dados:

Contagem de tráfego
Atas de reuniões da câmara municipal
Rastreamento por GPS

Projeto de fluxo de tráfego urbano

¹ Imagens por Streamline HQ

Projeto de fluxo de tráfego urbano

Contagens históricas de tráfego:

Viés histórico
Traçados urbanos do passado

Atas de reuniões:

Viés de seleção
Representação desproporcional de alguns membros da comunidade

dados de tráfego

¹ Imagens por Streamline HQ

Projeto de fluxo de tráfego urbano

Dados de GPS:

Vieses de amostragem e seleção
Pode não representar todos os passageiros

gps

¹ Imagem por Streamline HQ

Vamos praticar!

Gestão Responsável de Dados em IA

Preparing Video For Download...