A fase de interrogatório: qualidade dos dados

IA para Analistas de Dados

Andy Cotgreave

Author and Speaker, Former Technical Evangelist at Tableau

Os suspeitos de sempre

Problemas difíceis que a IA destrava

Duplicatas fuzzy

 

• Tradicional: criar regras à mão e manter para sempre
• IA: escreve a lógica de matching e traz entendimento semântico

 

• Saída → uma consulta ou agrupamento que dá pra ler e ajustar

Violações de ordem temporal

• Tradicional: escrever SQL que compara timestamps
• IA: descreve o que não deve acontecer → a IA escreve a consulta

Inconsistências lógicas

 

• Tradicional: tabelas de referência — alguém precisa manter
• IA: conhecimento de mundo, sem dados de referência

Interrogue o trabalho da IA

 

• IA não é mágica — gera consultas, código ou regras
• Isso pode estar errado: regex ruim, regra de negócio alucinada

Corrigindo os problemas

Vamos praticar!

IA para Analistas de Dados