Получение нужных данных

Стратегия искусственного интеллекта (ИИ)

Vidhi Chugh

AI strategist and ethicist

Доступность данных

• Больше данных -> лучше результаты модели

• Важно не только количество данных
• Разметка, качество и актуальность

• Модель улавливает скрытые закономерности

• Наука, ориентированная на данные
• Систематическая работа с данными

Релевантность данных

 

• Богатство и релевантность закономерностей
• Нерелевантные данные вводят модель в заблуждение -> снижают точность

 

• Пример: модель кредитного скоринга
  • Значимые атрибуты
  • История транзакций
  • Профиль активов

 

Актуальность данных во времени

• Динамика цепочек поставок изменилась после пандемии

Конфиденциальность данных

 

• Персональные данные пользователей

• Стандарты защиты данных, например GDPR

 

• Этические практики

• Формирует доверие пользователей

Словарь данных

 

• Раскрывает смысл полей данных и их значимость

 

• Эксперты предметной области связывают данные с бизнес-решениями

 

• Избыточные данные не улучшают предсказания модели

 

Выборка данных

• При работе с большими объёмами данных
• Сформируйте выборочный набор данных
• Сопоставимые результаты при меньших затратах

Аугментация данных

• Но что делать, если данных недостаточно?
• Аугментация данных — создание новых записей на основе имеющихся

Разнообразие данных

 

• Создание надёжных моделей

• Высокая точность модели

• Пример: заявка на кредит

  • Включить разные возрастные группы и этносы

 

Качество данных

 

• Полные и исчерпывающие данные
• Корректные данные: возраст и дата рождения

 

• Пропущенные данные
• Правильные метки данных

Давайте потренируемся!

Стратегия искусственного интеллекта (ИИ)