Експлуатація систем ШІ після запуску

ШІ для HR

Chris Klaus

Senior AI Architect, Chalice AI

На що зважати

$$

Стежте за сигналами:

  • Повторювані однакові запитання

  • Співробітники перевіряють відповіді вдруге

  • Незначні неузгодженості у відповідях

$$

Ведіть простий журнал:

  • Запитання, відповіді, що здалося не так

$$

Ці сигнали показують, коли системи «зносить»

ШІ для HR

Регулярні перевірки

$$

listy2.gif

Щомісячний огляд на 30 хв

  1. Відповідність політикам — Чи були оновлення? Протестуйте на актуальних запитаннях.

  2. Відхилення мови — Чи відповіді узгоджені з оновленим довідником?

  3. Крайові випадки — Перегляньте журнал на повторювані слабкі місця.

  4. Розповзання сфери — Система береться за нецільові запити?

  5. Точність інструкцій — Правила досі відповідають процесам?

ШІ для HR

Коли політики змінюються, спершу оновіть інструкції

$$

Оголошено нову політику? Спершу оновіть системи ШІ — перш ніж співробітники почнуть питати.

$$

Крок Дія
1 Негайно оновіть інструкції для ШІ — перегляньте джерела контексту й настанови для відповідей
2 Тестуйте реалістичними запитаннями — використайте фактичні запити співробітників для валідації
3 Зосередьтесь на крайових випадках — знайдіть сценарії, де агент може збоїти або хибити
4 Якщо неточно → звузьте сферу агента або спрямуйте до людей для рішення
ШІ для HR

Командна робота

$$

Щоквартальна вибіркова перевірка

Знайдіть ще одну людину для рев'ю ваших систем

  • Дайте їй п'ять реалістичних сценаріїв

  • Попросіть позначати непорозуміння, сюрпризи або моменти, де краще людське рішення

$$

check.png

ШІ для HR

Коли щось іде не так

$$

Негайні дії:

  1. Одразу виправте конфігурацію

  2. Задокументуйте, що сталося і що змінили

  3. Чітко повідомте залученим співробітникам

$$

Зразок повідомлення:

"Ми помітили, що [system] надав(ла) застарілі вказівки щодо [topic]. Ось актуальна політика..."

transparency.png

ШІ для HR

Створення мережі підтримки

$$

team.png

$$

Три постійні контакти, які вам потрібні:

Роль Навіщо потрібні
Контакт з HR Рано помічає непорозуміння співробітників
Технічний контакт Швидко коригує конфігурації
Контакт з комплаєнсу Сигналізує про регуляторні зміни
ШІ для HR

Моніторинг

4signals.png

ШІ для HR

$$

$$

calendar.png

$$

$$

Чотиритижнева рамка запуску:

  • Тиждень 1: Протестуйте топ‑20 очікуваних запитань

  • Тиждень 2: Пілот із 10–15 людьми

  • Тиждень 3: Оновіть за відгуками

  • Тиждень 4: Налаштуйте щомісячні огляди

ШІ для HR

Давайте потренуємось!

ШІ для HR

Preparing Video For Download...