Исторический bias

Преодоление предвзятости данных

Konstantinos Kattidis

Data Analytics Lead

Понятие исторического bias

Вы — аналитик, расследующий серию краж в одном из районов
Вы замечаете несоответствия: изменения в структуре преступности, демографии и методах правоохранительных органов
Исторический bias возникает, когда прошлые события не отражают точно текущее положение дел
Два распространённых типа: технологический bias и контекстуальный bias

Аналитик изучает данные о преступлениях с учётом исторического bias

Возникает, когда технологические изменения делают исторические данные устаревшими или менее актуальными

Продуктовый аналитик изучает эволюцию поведения пользователей с помощью данных о вовлечённости
В тот период основным способом выхода в интернет были настольные компьютеры
Такие паттерны поведения могут не точно отражать взаимодействие с мобильными устройствами

Люди, использующие устройства для выхода в интернет

Связан с изменениями в общественных нормах, предпочтениях, культурных ценностях или экономических условиях, влияющих на исторические данные

Маркетинговый аналитик изучает данные о клиентах для разработки рекламных кампаний бренда одежды
Необходимо учитывать меняющиеся культурные нормы и ценности
Контекстуальное понимание играет ключевую роль в принятии решений

Люди с различными нормами, предпочтениями и культурными ценностями

Учёный рассматривает долгосрочный линейный график

Лонгитюдные исследования, отслеживающие объекты на протяжении длительного времени, особенно подвержены историческому bias
Например, в долгосрочных климатических исследованиях необходимо учитывать изменение климата
Игнорирование этих изменений может привести к историческому bias в климатическом анализе

Ограничения исторических источников данных:
- Неполные данные или недостаточная представленность отдельных групп могут искажать интерпретацию прошлых событий
- Исторические события могли привести к утрате или недоступности части данных
Другие типы bias
- Иные виды bias способны усиливать исторический bias
- Например, bias выжившего может формировать искажённый исторический взгляд

Диаграмма, показывающая пропущенные данные и влияние других видов bias

Исторический bias существенно влияет на интерпретацию данных
Игнорирование исторического контекста может приводить к ошибочным выводам о тенденциях

Человек, принимающий решения

Преодоление предвзятости данных