Вибір джерела даних

Відповідальне керування даними для ШІ

Maria Prokofieva

Lead ML engineer

Навіщо обирати?

  • Забезпечте якість даних
  • Дотримання законодавства
  • Справедливість

 

Збентежена жінка обирає між двома кнопками та натискає синю

Відповідальне керування даними для ШІ

Крок 1. Відповідність проєкту

  • Відповідність цілям проєкту
  • Перевірте узгодженість із
    • Предметною галуззю
    • Охопленням
    • Очікуваними результатами

Іконка мішені

Відповідальне керування даними для ШІ

Крок 2. Доброчесність джерела даних

  • Оцініть доброчесність і надійність
  • Огляди та відгуки
  • Прозорість збору даних
  • Відповідність і ліцензування
  • Висока якість: регулярні оновлення

Рукостискання та щит — лінійна іконка

Відповідальне керування даними для ШІ

Крок 3. Юридична відповідність

  • Законність даних
  • Юридична відповідність для проєкту
  • Юридична консультація:
    • Застосовні закони та обмеження
    • Анонімізація даних
    • Вимоги до безпеки даних
  • Схвалено юридичною командою

закони

Відповідальне керування даними для ШІ

Крок 4. Технічна якість

  • Структурна цілісність і придатність
  • Повнота
  • Узгодженість
  • Точність
  • Актуальність

Сертифікат якості

Відповідальне керування даними для ШІ

Крок 5. Упередженість і репрезентативність

  • Аналіз демографічного представлення
  • Захищені характеристики
  • Аналіз розподілу груп
  • Метрики справедливості
  • Аугментація даних
Відповідальне керування даними для ШІ

Крок 6. Вибір

  • Включайте, якщо:
    • Послідовно узгоджується
    • Можна виправити трансформацією, аугментацією або алгоритмами
  • Виключайте, якщо:
    • Є прогалини в ключових аспектах
  • Консультуйтеся з експертами галузі

Здійснення вибору

Відповідальне керування даними для ШІ

Проєкт міських транспортних потоків

Джерела даних:

  1. Дані підрахунку трафіку
  2. Протоколи засідань ради
  3. Дані GPS-відстеження
  4. Згадки в соцмережах про стан трафіку
  5. Дані опитування пасажирів

Проєкт міських транспортних потоків

1 Images by Streamline HQ
Відповідальне керування даними для ШІ

Проєкт міських транспортних потоків

Виключити:

  • Дані із соцмереж
  • Дані опитування пасажирів

Зміни:

  • Протоколи засідань ради
  • Дані підрахунку трафіку
    • Додаткові дані із сенсорів
  • Дані GPS
    • Додаткові дані з камер
Відповідальне керування даними для ШІ

Давайте потренуємось!

Відповідальне керування даними для ШІ

Preparing Video For Download...