Trénování modelu
Generative AI Concepts
Daniel Tedesco
Data Lead, Google
Zvolte způsob trénování
Hardware
Čas
Velikost datové sady
Složitost modelu
Počet trénovacích kol
Náklady
Přechod k pokročilým technikám
Základní generativní model AI je prvním krokem
Pokročilé techniky jej specializují pro konkrétní kontexty
Klíčové pokročilé techniky:
Transfer learning a fine-tuning
RLHF
Vlastní embeddingy
Od koček ke lvům
Transfer learning přenáší znalosti z jedné úlohy na druhou
Fine-tuning je typ transfer learningu pro malé datové sady
1
Creative Commons Attribution-Share Alike 4.0, Bing image generator
Kam míří vaše zpětná vazba?
1
Google Bard, 2023
Palec nahoru pro lepší odpovědi
1
Google Bard, 2023
Embeddingy jako otisky prstů
Podobné rozpoznávání otisku prstu
Jedinečné reprezentace datových entit
Zachycují význam, kontext a vztahy v kompaktní podobě
1
Wikimedia commons
Embedding Dana
1
Daniel Tedesco, 2023
Dan jako embedding
1
Daniel Tedesco portraits from vana.com
Pojďme si procvičit!
Generative AI Concepts
Preparing Video For Download...