Medição da POC

Implementação de Soluções de IA nos Negócios

Jacob H. Marquez

Data Scientist

Como definir o sucesso?

$$

Valor do negócio

Implementação de Soluções de IA nos Negócios

Como definir o sucesso?

$$

Desempenho do modelo de IA

Implementação de Soluções de IA nos Negócios

Como definir o sucesso?

$$

Explicabilidade

Implementação de Soluções de IA nos Negócios

Como definir o sucesso?

$$

Desempenho da solução

Implementação de Soluções de IA nos Negócios

Medição do valor comercial

Eficiência. Produtividade. Criatividade. Capacitação.

Implementação de Soluções de IA nos Negócios

Medição do valor comercial

Chatbot de agendamento Chatbot perguntando sobre seu dia

Métricas

  • Tempo do agente gasto com agendamento
  • Número de compromissos agendados
  • Porcentagem de clientes interessados agendados
  • Tempo para o compromisso agendado

OBJECTIVES

  • Reduzir horas gastas pelo atendimento ao cliente com agendamento
  • Mais tempo para tarefas de alto nível
  • Aumentar o número de clientes agendados
  • Porcentagem de agendamentos cancelados reagendados
Implementação de Soluções de IA nos Negócios

Medição do modelo de IA

Precisão

Relevância

Implementação de Soluções de IA nos Negócios

Medição do modelo de IA

Precisão

  • Precisão: porcentagem de previsões corretas
  • Métrica importante para a maioria das soluções de IA

Tempos de sugestão de chatbot

Implementação de Soluções de IA nos Negócios

Medição do modelo de IA

Relevância

  • Resultados relevantes com base na entrada
  • Diretos e indiretos

Chatbot sugerindo um local

Implementação de Soluções de IA nos Negócios

Explicabilidade da IA

Explicabilidade é a capacidade de entender o processo de tomada de decisão da solução de IA.

  • Equidade, transparência, parcialidade e segurança

Imparcialidade

Imparcialidade

Transparência

Transparência

Implementação de Soluções de IA nos Negócios

Medição do desempenho da solução

Uma solução de IA.

Implementação de Soluções de IA nos Negócios

Medição do desempenho da solução

Uma solução de IA que não funciona.

Implementação de Soluções de IA nos Negócios

Medição do desempenho da solução

Uma solução de IA que não funciona e leva a perdas.

Implementação de Soluções de IA nos Negócios

Medição do desempenho da solução

Solução de IA que é cronometrada

Experiência do usuário

Métricas

  • Tempo de carregamento
  • Tempo para confirmação do compromisso
  • Satisfação do cliente
Implementação de Soluções de IA nos Negócios

Vamos praticar!

Implementação de Soluções de IA nos Negócios

Preparing Video For Download...