Огляд робочого процесу text mining

Аналіз тональності в R

Ted Kwartler

Data Dude

Дотепер…

  • polarity()
    • Зсуви валентності
  • tidytext, dplyr, tidyr
    • bing, nrc, afinn
  • Візуалізації
Аналіз тональності в R

  Карта Бостона

Аналіз тональності в R

Робочий процес text mining

Робочий процес TM

Аналіз тональності в R

6 визначених кроків

  1. Сформулюйте проблему й конкретні цілі
  2. Визначте текст
  3. Упорядкуйте текст
  4. Видобудьте ознаки
  5. Проаналізуйте
  6. Зробіть висновок/дійдіть інсайту
Аналіз тональності в R

Крок 1: Сформулюйте проблему

Поради:

  • Будьте точними
  • Уникайте «розповзання меж завдання»
  • Ітеруйте й пробуйте нові методи та/або лексикони суб'єктивності, щоб забезпечити узгодженість
Аналіз тональності в R

Крок 2: Визначте свій текст

Поради:

  • Знаходьте доречні джерела (напр., шукати ціни акцій у Wikipedia менш логічно, ніж аналізувати біржовий форум)
  • Дотримуйтеся умов користування сайтом, обережно зі скрапінгом
  • Джерело впливає на мову… ознайомтеся з його тоном і нюансами
Аналіз тональності в R

Давайте потренуємось!

Аналіз тональності в R

Preparing Video For Download...