Tổng kết

Xử lý ngôn ngữ tự nhiên với spaCy

Azadeh Mobasher

Principal data scientist

Chương 1 - Tổng quan về NLP và spaCy

Pipeline ngôn ngữ của spaCy

Làm việc với các lớp spaCy như Doc, Token, Span và dự đoán độ tương đồng ngữ nghĩa bằng vector từ:

Phép tương tự và thao tác vector

Viết mẫu khớp để trích xuất thuật ngữ/cụm từ bằng Matcher và PhraseMatcher của spaCy:

matcher = Matcher(nlp.vocab)
pattern = [{"LOWER": "good"}, {"LOWER": {"IN": ["morning", "evening"]}}]
matcher.add("morning_greeting", [pattern])

matcher = PhraseMatcher(nlp.vocab, attr = "LOWER")
patterns = [nlp.make_doc(term) for term in terms]
matcher.add("InvestmentTerms", patterns)

Ví dụ NER trong y khoa

Xử lý ngôn ngữ tự nhiên với spaCy