ChatGPT 的限制

認識 ChatGPT

James Chapman

Curriculum Manager, DataCamp

ChatGPT 的運作原理

一張圖示,顯示提示與回應如何連結到大型語言模型。

認識 ChatGPT

揭開 LLM 的神祕面紗

 

一面大型積木牆。

認識 ChatGPT

揭開 LLM 的神祕面紗

 

一面大型積木牆,旁邊是一面缺了一塊、正要補上的牆。

認識 ChatGPT

揭開 LLM 的神祕面紗

一面積木牆。

認識 ChatGPT

揭開 LLM 的神祕面紗

積木牆被標記為訓練資料。

認識 ChatGPT

揭開 LLM 的神祕面紗

出現一個網路結構,代表用於識別語言模式的演算法。

認識 ChatGPT

揭開 LLM 的神祕面紗

齒輪與燈泡,被循環符號環繞,代表微調模型所需的反覆流程。

認識 ChatGPT

揭開 LLM 的神祕面紗

一個人偶用積木砌牆,比喻 ChatGPT 對文字的處理方式。

認識 ChatGPT

限制 1-知識截斷

 

 

  • 只訓練到某個日期以前:
    • GPT 3.5:2022 年 1 月
    • GPT 4:2023 年 4 月
  • 不知道此日期之後的事件

 

一面在特定日期戛然而止的積木牆。

認識 ChatGPT

限制 2-訓練資料偏誤

 

  • ChatGPT 訓練於龐大的文字資料集,包括:

    • 書籍
    • 文章
    • 網站
  • 模型可能學到訓練資料中的偏見

  • 回應也可能產生偏誤

一個圖示,說明模型會從看過的資料中學到偏見。

認識 ChatGPT

限制 3-脈絡追蹤

 

一段使用者與 ChatGPT 的對話,情境隨時間變動。

認識 ChatGPT

限制 3-脈絡追蹤

 

一段使用者與 ChatGPT 的對話,情境隨時間變動。

認識 ChatGPT

限制 3-脈絡追蹤

 

  • 焦點轉移時,難以持續掌握脈絡
  • 可能導致不準確或不相干的結果
  • 提示:將對話聚焦在單一主題

 

一段使用者與 ChatGPT 的對話,情境隨時間變動。

認識 ChatGPT

限制 4-幻覺(Hallucination)

 

  • 模型有時會自信地提供錯誤資訊
  • 多見於超出其知識或能力範圍時

ChatGPT 臆造一個 LinkedIn 個人檔案的範例。

1 https://en.wikipedia.org/wiki/Hallucination_(artificial_intelligence)
認識 ChatGPT

限制 5-法律與倫理議題

 

  • :創作一首模仿某位現有歌手風格的歌曲
    • 新歌的所有權屬於誰?

 

一個使用者在筆電前的圖示。

認識 ChatGPT

限制 5-法律與倫理議題

 

  • :創作一首模仿某位現有歌手風格的歌曲
    • 新歌的所有權屬於誰?

 

一個歌手演唱的圖示。

認識 ChatGPT

限制 5-法律與倫理議題

 

  • :創作一首模仿某位現有歌手風格的歌曲
    • 新歌的所有權屬於誰?

 

  • 很容易落入法律灰色地帶
  • 所有權與隱私 → 第 2 章

 

一個技術利害關係人的圖示。

認識 ChatGPT

一起來練習吧!

認識 ChatGPT

Preparing Video For Download...