Повторение рабочего процесса анализа текста

Анализ тональности в R

Ted Kwartler

Data Dude

Что уже изучено...

  • polarity()
    • Valence shifters
  • tidytext, dplyr, tidyr
    • bing, nrc, afinn
  • Визуализации
Анализ тональности в R

  Карта Бостона

Анализ тональности в R

Рабочий процесс анализа текста

рабочий процесс анализа текста

Анализ тональности в R

6 этапов

  1. Определите проблему и конкретные цели
  2. Выберите текст
  3. Организуйте текст
  4. Извлеките признаки
  5. Проведите анализ
  6. Сформулируйте вывод или инсайт
Анализ тональности в R

Шаг 1: определите задачу

Советы:

  • Формулируйте точно
  • Избегайте «расползания» области задачи
  • Итерируйте и пробуйте новые методы и/или лексиконы субъективности для обеспечения согласованности
Анализ тональности в R

Шаг 2: выберите текст

Советы:

  • Выбирайте подходящие источники (например, искать цены акций в Wikipedia менее эффективно, чем изучать форумы инвесторов)
  • Соблюдайте условия использования сайтов, будьте внимательны при веб-скрейпинге
  • Источник текста влияет на язык — ознакомьтесь с тоном и особенностями источника
Анализ тональности в R

Давайте потренируемся!

Анализ тональности в R

Preparing Video For Download...