Analisis NLP tambahan

Pengantar Natural Language Processing di R

Kasey Jones

Research Data Scientist

BERT, dan ERNIE.

Apa itu:

  • BERT: Bidirectional Encoder Representations from Transformers
  • Model untuk transfer learning pada tugas NLP
  • dipra-latih pada data tanpa label untuk membentuk representasi bahasa
  • membutuhkan sedikit data berlabel untuk melatih tugas spesifik

Untuk apa digunakan:

  • tugas terawasi
  • membuat fitur untuk model NLP

ERNIE: Enhanced Representation through kNowledge IntEgration

Pengantar Natural Language Processing di R

Named Entity Recognition

Apa itu:

  • mengklasifikasikan entitas bernama dalam teks
  • Contoh: nama, lokasi, organisasi, nilai

Untuk apa digunakan:

  • mengekstrak entitas dari tweet
  • membantu mesin rekomendasi
  • algoritma pencarian
Pengantar Natural Language Processing di R

Penandaan kelas kata (POS tagging)

Apa itu:

  • menandai kata dengan kelas kata (part-of-speech)
    • nomina, verba, adjektiva, dll.

Bagaimana digunakan:

  • membantu analisis sentimen
  • membuat fitur untuk model NLP
  • memperkaya informasi model tentang tiap kata dalam teks
Pengantar Natural Language Processing di R

Mari rekap.

Pengantar Natural Language Processing di R

Preparing Video For Download...