Розмітка частин мови

Інженерія ознак для NLP у Python

Rounak Banik

Data Scientist

Застосування

Розрізнення значень слів
- "The bear is a majestic animal"
- "Please bear with me"
Аналіз тональності
Відповіді на запитання
Виявлення фейкових новин і спаму в відгуках

Призначення кожному слову його частини мови.
```
"Jane is an amazing guitarist."
```
POS Tagging:
- Jane → власна назва
- is → дієслово
- an → визначник
- amazing → прикметник
- guitarist → іменник

import spacy

# Load the en_core_web_sm model
nlp = spacy.load('en_core_web_sm')

# Initiliaze string
string = "Jane is an amazing guitarist"

# Create a Doc object
doc = nlp(string)

...
...
# Generate list of tokens and pos tags
pos = [(token.text, token.pos_) for token in doc]
print(pos)

[('Jane', 'PROPN'), 
 ('is', 'VERB'), 
 ('an', 'DET'), 
 ('amazing', 'ADJ'), 
 ('guitarist', 'NOUN')]

Документація spaCy щодо POS-нотацій

Інженерія ознак для NLP у Python