分词与Transformer

ChatGPT 进阶

Alex Banks

Founder & Educator

分词

一位男子看着类似Transformer的角色，想象气泡中出现"Tokens"一词的插图

分词

外形类似电影角色"终结者"的男子插图

编码

外形类似电影角色"终结者"的男子插图

向量化

外形类似电影角色"终结者"的男子插图

解码

外形类似电影角色"终结者"的男子插图

自注意力

类似Transformer的机器人角色在秤旁

自注意力

一只猫坐在垫子上的插图

Token 关系

画面中两个彩色机器人置于一个大的粉色爱心内，周围有小爱心。左侧机器人标注"it"，右侧标注"the cat"。爱心左边竖排三段蓝色文字："the cat""sat""the cat"。

上下文理解

两位彩色机器人并排坐着，右侧机器人做出说话手势。

Passons à la pratique !

ChatGPT 进阶

Preparing Video For Download...