Clasificarea textului

Introducere în Generative AI în Snowflake

James Cha-Earley

Senior Developer Advocate, Snowflake

Provocările clasificării textului

Problema

$$

  • Recenziile pot conține orice tip de informație

$$

  • Categorisirea manuală necesită timp și nu este scalabilă

Soluția

$$

  • Automatizează cu Snowflake Cortex!

$$

  • classify_text()
Introducere în Generative AI în Snowflake

Definirea categoriilor

# Define categories
categories = ["overall_experience", "location", "staff", "food_beverages",
              "facilities"]
Introducere în Generative AI în Snowflake

Clasificarea textului

from snowflake.cortex import classify_text

category = classify_text( str_input="The check-in was smooth and the staff were very friendly.", categories=categories )
print(category)
{  
  "label": "staff"  
}
Introducere în Generative AI în Snowflake

Convertirea rezultatelor în dicționar

print(type(category))
<class 'str'>
import json

category_dict = json.loads(category)
print(type(category_dict))
<class 'dict'>
Introducere în Generative AI în Snowflake

Scalarea fluxului de lucru

  • Un flux de clasificare care categorisește recenziile pentru o lună dată
# Python code
month = 5
-- SQL query
SELECT *
FROM HOTELS.REVIEWS
WHERE EXTRACT(month FROM date) = '{{month}}'
Introducere în Generative AI în Snowflake

Aplicarea classify_text()

df = dataframe_1.to_pandas()

def classification(text): result = classify_text( str_input=text, categories=labels ) result_dict = json.loads(result) return result_dict["label"]
Introducere în Generative AI în Snowflake

Aplicarea classify_text()

# Apply classification to the DataFrame
df["category"] = reviews["DESCRIPTION"].apply(classification)

# Print the first row's predicted category print(df["category"].head(1))
0    overall_experience  
Name: category, dtype: object
Introducere în Generative AI în Snowflake

Analiza sentimentului

  • Interesează doar sentimentul recenziilor

AI_SENTIMENT într-o celulă SQL

Introducere în Generative AI în Snowflake

Analiza sentimentului

AI_SENTIMENT - extragerea unui sentiment

$$

  • Sentimente disponibile: positive, negative, neutral, mixed și unknown
Introducere în Generative AI în Snowflake

Hai să exersăm!

Introducere în Generative AI în Snowflake

Preparing Video For Download...