Charles Explorer logo
🇨🇿

Využití velkých jazykových modelů

Předmět na Filozofická fakulta |
AMLV00081

Anotace

V této chvíli je člověk v synergii se strojem v drtivé většině kreativních činností pořád ještě lepší než samotný stroj. Má tedy smysl, se v této synergii zdokonalovat. Tento seminář se zaměří na velké jazykové modely (large language models, LLMs), které se vynořily na sklonku desátých let, získaly popularitu s příchodem Chat GPT, a pravděpodobně nás už neopustí.

Strukturu semináře budeme vytvářet společně na místě a jelikož netuším, jaká témata vás zaujmou a jaké nástroje stihnou během semestru vyjít, multiverzum možných sylabů je příliš široké, než aby jej zde bylo možno popsat.

Pravděpodobně začneme tím, jak vlastně jazykové modely obecně fungují a jak fungují transformery (architektura, na které jsou postavené), jak jsou základní modely dále upravované, co je finetuning, RLHF a podobně.

Ale pak už se vrhneme do víru praktických ukázek, jak s modely efektivně pracovat.

Jak najít správné simulakrum a vytvořit mu správné prostředí.

Jak ono simulakrum donutit, aby fungovalo konzistentně na široké škále různých úkolů.

Antropomorfizace a démonomorfizace

Užitečné memy

Gaslighting a další manipulativní techniky "prompt inženýringu"

Prompt injecting, jailbreaking, Waluigi effect

Etika a notkilleveryoneism pluginy pro ChatGPT

Možná na tenhle seminář budeme vzpomínat s lehkou ironií, podobně jako lidé, kteří se v roce 2003 účastnili seminářů typu "Jak správně používat Google", ale tak nějak doufám, že na něj vzpomínat budeme.