Этап проверки: качество данных

AI для аналитиков данных

Andy Cotgreave

Author and Speaker, Former Technical Evangelist at Tableau

Типичные проблемы

Более сложные задачи, которые решает ИИ

Нечеткие дубликаты

 

• Традиционный подход: вручную писать правила и поддерживать их вечно
• ИИ: пишет логику сопоставления и обеспечивает семантическое понимание

 

• Результат → запрос или группировка, которые можно прочитать и скорректировать

Нарушения временного порядка

• Традиционный подход: писать SQL-запросы для сравнения временных меток
• ИИ: опишите, что не должно происходить → ИИ напишет запрос

Логические несоответствия

 

• Традиционный подход: справочные таблицы — их нужно постоянно поддерживать
• ИИ: опирается на общие знания, справочные данные не нужны

Проверяйте работу ИИ

 

• ИИ — не волшебство: он генерирует запросы, код или правила
• Эта работа может быть ошибочной: некорректное регулярное выражение, выдуманное бизнес-правило

Исправление проблем

Давайте потренируемся!

AI для аналитиков данных