テキスト分析

OpenAI API によるプロンプトエンジニアリング

Fouad Trad

Machine Learning Engineer

テキスト分析

  • テキストを調べて情報を抽出する
    • テキスト分類
    • エンティティ抽出
  • 企業は顧客データを使用する際、法的な助言を求めるべきです

Image showing how text analysis extracts information such as sentiment, emotion, tone, entities, etc. from a given text.

OpenAI API によるプロンプトエンジニアリング

- テキスト分類

  • テキストにカテゴリを割り当てる
  • 例:感情分析

Image showing the classes of sentiment analysis as positive, negative, or neutral.

OpenAI API によるプロンプトエンジニアリング

指定されたカテゴリ

  • 分類カテゴリがわかっている場合は指定する
  • 出力要件を指定する
text = "I bought your XYZ Smart Watch and wanted to share my positive experience. 
Impressed with its sleek design, comfort, and touchscreen usability."

prompt = f"""Classify the sentiment of the text delimited by triple backticks as positive, negative, or neutral. Give your answer as a single word: ```{text}```""" print(get_response(prompt))
positive
OpenAI API によるプロンプトエンジニアリング

未指定のカテゴリ

  • モデルは、カテゴリが指定されていない場合、自身の知識を使用します
text = "I bought your XYZ Smart Watch and wanted to share my positive experience. 
Impressed with its sleek design, comfort, and touchscreen usability."

prompt = f"""Classify the sentiment of the text delimited by triple backticks. 
             Give your answer as a single word.
           ```{text}```"""
print(get_response(response))
positive.
  • 一部のオープンエンドな問題では、うまく機能しない場合があります
OpenAI API によるプロンプトエンジニアリング

複数のクラス

  • テキストは複数のクラスに分類できます
  • クラスが不明な場合は、クラス数の上限を指定する
text = "I bought your XYZ Smart Watch and wanted to share my positive experience. 
Impressed with its sleek design, comfort, and touchscreen usability."

prompt = f"""Identify emotions used in this text. Don't use more than 3 emotions. Format your answer as a list of words separated by commas: ```{text}```""" print(get_response(prompt))
impressed, positive, comfortable
OpenAI API によるプロンプトエンジニアリング

エンティティ抽出

  • テキストから特定のエンティティを抽出する
  • 例:名前、場所、組織、日付

Icon showing how entity extraction is about extracting specific entities from a given text

OpenAI API によるプロンプトエンジニアリング

エンティティ抽出:エンティティを指定する

  • 抽出するエンティティを指定する
  • 出力形式を指定する
text = "The XYZ Mobile X200: a sleek 6.5-inch Super AMOLED smartphone with a 48MP 
triple-camera, octa-core processor, 5000mAh battery, 5G connectivity, and Android 
11 OS. Secure with fingerprint and facial recognition. 128GB storage, expandable up 
to 512GB."

prompt = f"""Identify the following entities from the text delimited by triple backticks: - Product Name ```{text}```""" print(get_response(prompt))
OpenAI API によるプロンプトエンジニアリング

エンティティ抽出:エンティティを指定する

  • 抽出するエンティティを指定する
  • 出力形式を指定する
text = "The XYZ Mobile X200: a sleek 6.5-inch Super AMOLED smartphone with a 48MP 
triple-camera, octa-core processor, 5000mAh battery, 5G connectivity, and Android 
11 OS. Secure with fingerprint and facial recognition. 128GB storage, expandable up 
to 512GB."

prompt = f"""Identify the following entities from the text delimited by triple backticks: - Product Name - Display Size ```{text}```""" print(get_response(prompt))
OpenAI API によるプロンプトエンジニアリング

エンティティ抽出:エンティティを指定する

  • 抽出するエンティティを指定する
  • 出力形式を指定する
text = "The XYZ Mobile X200: a sleek 6.5-inch Super AMOLED smartphone with a 48MP 
triple-camera, octa-core processor, 5000mAh battery, 5G connectivity, and Android 
11 OS. Secure with fingerprint and facial recognition. 128GB storage, expandable up 
to 512GB."

prompt = f"""Identify the following entities from the text delimited by triple backticks: - Product Name - Display Size - Camera Resolution ```{text}```""" print(get_response(prompt))
OpenAI API によるプロンプトエンジニアリング

エンティティ抽出:エンティティを指定する

  • 抽出するエンティティを指定する
  • 出力形式を指定する
text = "The XYZ Mobile X200: a sleek 6.5-inch Super AMOLED smartphone with a 48MP 
triple-camera, octa-core processor, 5000mAh battery, 5G connectivity, and Android 
11 OS. Secure with fingerprint and facial recognition. 128GB storage, expandable up 
to 512GB."

prompt = f"""Identify the following entities from the text delimited by triple backticks: - Product Name - Display Size - Camera Resolution Format the answer as an unordered list. ```{text}```""" print(get_response(prompt))
OpenAI API によるプロンプトエンジニアリング

エンティティ抽出:エンティティを指定する

Product Name: XYZ Mobile X200
Display Size: 6.5-inch
Camera Resolution: 48MP triple-camera
OpenAI API によるプロンプトエンジニアリング

few-shotプロンプトを使ったエンティティ抽出

  • 複雑な構造の場合
ticket_1 = "Hello, I'm Emma Adams. I'd 
like to ask about my reservation with 
the code CAR123. 
You can reach me at +123456 if needed."

ticket_2 = "This is Sarah Williams. 
I would like to request some information
regarding my upcoming flight with 
reservation code FLIGHT987. Thank you."
entities_1 = """
* Customer Details:
  - Name: Emma Adams
  - Phone: +123456
* Reservation Details:
  - Reservation Code: CAR123"""
entities_2 = """
* Customer Details:
  - Name: Sarah Williams
* Reservation Details:
  - Reservation Code: FLIGHT987"""
OpenAI API によるプロンプトエンジニアリング

few-shotプロンプトを使ったエンティティ抽出

ticket_3 = "Hello, I'm David Brown (CUST123). I need assistance with my reservation under 
the code HOTEL456. There are some questions and issues related to my upcoming stay that 
require your attention."

prompt = f"""Text: {ticket_1} -> Entities: {entities_1} Text: {ticket_2} -> Entities: {entities_2} Text: {ticket_3} -> Entities: """ print(get_response(prompt))
* Customer Details:
  - Name: David Brown
  - Customer ID: CUST123
* Reservation Details:
  - Reservation Code: HOTEL456
OpenAI API によるプロンプトエンジニアリング

練習しましょう!

OpenAI API によるプロンプトエンジニアリング

Preparing Video For Download...