Снижение рисков ИИ

Введение в ИИ для работы

James Chapman

AI Curriculum Manager, DataCamp

Борьба с фабрикацией знаний

 

Доверяй, но проверяй

  • Всегда проверяйте важную информацию
    • 📈 Числа и данные
    • 📖 Цитаты и ссылки
    • 🏛 Исторические факты и даты
    • 💻 Технические детали

hallucination1.jpg

Введение в ИИ для работы

Почему ИИ делает необоснованные утверждения

next_word_prediction.png

  • Модели ИИ генерируют наиболее вероятное следующее слово
  • В обучающих данных фраза «Я не знаю» встречается крайне редко
1 https://openai.com/index/why-language-models-hallucinate/
Введение в ИИ для работы

Учите ИИ признавать неопределённость

 

🤝 Право на отказ от ответа: «Если вы не уверены, скажите „Я не знаю", а не угадывайте.»

🎯 Калибровка: «Пометьте каждое утверждение: уверен / не уверен / предположение.»

📚 Указывайте источник: «Для каждого фактического утверждения приведите источник или пометьте его как непроверенное.»

 

🧹 Самопроверка: «Перечислите всё, что может быть ошибочным или основанным на допущениях.»

🧭 Ограничение области: «Опирайтесь только на то, что явно указано во входных данных. Не делайте умозаключений.»

Введение в ИИ для работы

Борьба с устареванием данных

 

  • Всегда проверяйте дату окончания обучения модели
  • Верифицируйте всё, что произошло после неё

    • 💰 Цены
    • 🏛 Регуляторные изменения
    • 👷 Кадровые перестановки
    • 📰 Новости
  • 🌐 Используйте поддержку веб-поиска

recency.png

Введение в ИИ для работы

Борьба с предвзятостью в ответах ИИ

 

  • Критически анализируйте результаты

    • 🤝 Материалы по найму
    • ✨ Маркетинговые материалы
    • 👉 Принятие решений
  • ❗ Инструменты обнаружения предвзятости

biased.png

Введение в ИИ для работы

Борьба с угодливостью ИИ

 

  • 🧭 Направляйте ИИ к объективности и критическому анализу
  • 🤔 Сохраняйте скептицизм в отношении ответов ИИ
  • 💬 Явно запрашивайте критическую обратную связь
    • Какие потенциальные проблемы есть у этого подхода?
    • Какие альтернативные точки зрения существуют по этому вопросу?

sycophancy.png

Введение в ИИ для работы

Защита конфиденциальности и данных

 

  • Никогда не передавайте:
    • 🔑 Пароли и учётные данные
    • 🔍 Персональные данные клиентов (например, ПДн)
    • 📣 Конфиденциальную информацию компании
    • 📜 Секретные стратегии и планы

 

  • Правило: если вы не готовы опубликовать это публично, не вставляйте это в стандартный инструмент ИИ

privacy.png

Введение в ИИ для работы

Контрольный список безопасности ИИ

checklist1.jpg

Введение в ИИ для работы

Контрольный список безопасности ИИ

checklist2.jpg

Введение в ИИ для работы

Контрольный список безопасности ИИ

checklist3.jpg

Введение в ИИ для работы

Контрольный список безопасности ИИ

checklist4.jpg

Введение в ИИ для работы

Контрольный список безопасности ИИ

checklist4_5.jpg

Введение в ИИ для работы

Контрольный список безопасности ИИ

checklist5.jpg

Введение в ИИ для работы

Давайте потренируемся!

Введение в ИИ для работы

Preparing Video For Download...