Tokenização e Transformers

ChatGPT Intermediário

Alex Banks

Founder & Educator

Tokenização

Ilustração de um homem olhando para um personagem tipo Transformer, imaginando a palavra "Tokens"

Tokenização

Ilustração de um homem com semelhança ao personagem do filme Exterminador do Futuro

Codificação

Ilustração de um homem com semelhança ao personagem do filme Exterminador do Futuro

Vetorização

Ilustração de um homem com semelhança ao personagem do filme Exterminador do Futuro

Decodificação

Ilustração de um homem com semelhança ao personagem do filme Exterminador do Futuro

Autoatenção

Personagem robô estilo Transformer ao lado de uma balança

Autoatenção

Ilustração de um gato sentado no tapete

Relações entre tokens

A imagem mostra dois robôs coloridos dentro de um grande coração rosa com corações menores ao redor. O robô da esquerda está marcado como "it" e o da direita como "the cat". À esquerda do coração, três trechos de texto aparecem verticalmente: "the cat", "sat" e "the cat", todos em azul

Entendimento contextual

A imagem mostra dois robôs coloridos sentados lado a lado; o da direita faz um gesto de fala.

Vamos praticar!

ChatGPT Intermediário