Seleção da fonte de dados

Gestão Responsável de Dados em IA

Maria Prokofieva

Lead ML engineer

Por que selecionar?

  • Garantir qualidade dos dados
  • Conformidade legal
  • Equidade

 

Mulher confusa escolhendo entre dois botões e apertando o azul

Gestão Responsável de Dados em IA

Etapa 1. Relevância do projeto

  • Relevância para os objetivos do projeto
  • Verificar alinhamento com
    • Tema
    • Escopo
    • Resultados esperados

Ícone de alvo

Gestão Responsável de Dados em IA

Etapa 2. Integridade da fonte de dados

  • Avaliar integridade e confiabilidade
  • Avaliações e depoimentos
  • Transparência na coleta de dados
  • Conformidade e licenças
  • Alta qualidade: atualizações regulares

Aperto de mão e escudo em linha

Gestão Responsável de Dados em IA

Etapa 3. Conformidade legal

  • Legalidade dos dados
  • Conformidade legal do projeto
  • Assessoria jurídica:
    • Leis e restrições aplicáveis
    • Anonimização de dados
    • Requisitos de segurança
  • Aprovado pela equipe jurídica

leis

Gestão Responsável de Dados em IA

Etapa 4. Qualidade técnica

  • Integridade e usabilidade da estrutura
  • Completo
  • Consistente
  • Preciso
  • Atual

Certificado de qualidade

Gestão Responsável de Dados em IA

Etapa 5. Viés e representatividade

  • Análise de representatividade demográfica
  • Características protegidas
  • Analisar a distribuição dos grupos
  • Métricas de equidade
  • Aumento de dados
Gestão Responsável de Dados em IA

Etapa 6. Seleção

  • Incluir se:
    • Alinha de forma consistente
    • Pode ser corrigido com transformação, aumento ou algoritmos
  • Excluir se:
    • Falta em áreas-chave
  • Consultar especialistas do domínio

Fazendo uma seleção

Gestão Responsável de Dados em IA

Projeto de fluxo de tráfego urbano

Fontes de dados:

  1. Contagem de tráfego
  2. Atas de reuniões do conselho
  3. Dados de rastreamento GPS
  4. Menções nas redes sobre condições de tráfego
  5. Pesquisa com usuários pendulares

Projeto de fluxo de tráfego urbano

1 Imagens por Streamline HQ
Gestão Responsável de Dados em IA

Projeto de fluxo de tráfego urbano

Excluir:

  • Dados de redes sociais
  • Dados de pesquisa com pendulares

Alterações:

  • Atas de reuniões do conselho
  • Contagem de tráfego
    • Dados extras de sensores
  • Dados de GPS
    • Dados extras de câmeras
Gestão Responsável de Dados em IA

Vamos praticar!

Gestão Responsável de Dados em IA

Preparing Video For Download...