Další analýza NLP

Úvod do zpracování přirozeného jazyka v R

Kasey Jones

Research Data Scientist

BERT a ERNIE

Co to je:

  • BERT: Bidirectional Encoder Representations from Transformers
  • Model používaný v transferovém učení pro úlohy NLP
  • Je předtrénován na neoznačených datech pro vytvoření jazykové reprezentace
  • Vyžaduje jen malé množství označených dat pro trénování konkrétní úlohy

K čemu slouží:

  • Supervidované úlohy
  • Vytváření příznaků pro modely NLP

ERNIE: Enhanced Representation through kNowledge IntEgration

Úvod do zpracování přirozeného jazyka v R

Rozpoznávání pojmenovaných entit

Co to je:

  • Klasifikuje pojmenované entity v textu
  • Příklady: jména, místa, organizace, hodnoty

K čemu slouží:

  • Extrakce entit z tweetů
  • Podpora doporučovacích systémů
  • Vyhledávací algoritmy
Úvod do zpracování přirozeného jazyka v R

Tagování slovních druhů

Co to je:

  • Označování slov jejich slovním druhem
    • podstatná jména, slovesa, přídavná jména atd.

Jak se používá:

  • Pomáhá při analýze sentimentu
  • Vytváří příznaky pro modely NLP
  • Rozšiřuje znalosti modelu o každém slově v textu

Feature Engineering for NLP in Python

Úvod do zpracování přirozeného jazyka v R

Shrnutí

Úvod do zpracování přirozeného jazyka v R

Preparing Video For Download...