Čo je GPT – rad modelov OpenAI: Bez neho by dnešná AI vyzerala úplne inak – a to nie je všetko

Čo je GPT – rad modelov OpenAI: Bez neho by dnešná AI vyzerala úplne inak – a to nie je všetko

Máte asistenta, ktorý napíše román za desať minút, odladí vám kód v piatich jazykoch a poradí s daňovým priznaním – no ak sa ho spýtate na dátum narodenia Alberta Einsteina, zrazu si vymyslí, že sa narodil v roku 1955.

To je GPT v kocke: neuveriteľne výkonný, no zároveň zradne nedokonalý. Rad modelov GPT od OpenAI dnes poháňa milióny aplikácií od ChatGPT až po firemné chatboty, no málokto rozumie, čo sa pod skratkou naozaj skrýva a kde sú jeho limity.

Definícia: Čo je GPT

GPT (Generative Pre-trained Transformer) je rodina veľkých jazykových modelov (LLM) vyvinutá spoločnosťou OpenAI. Ide o neurónové siete trénované na obrovskom množstve textov z internetu, ktoré vedia generovať ľudsky znejúce odpovede, prekladať, sumarizovať, písať kód či tvoriť kreatívny obsah. Od roku 2018, keď vyšiel prvý GPT-1 so 117 miliónmi parametrov, sa rad vyvinul až k súčasnému GPT-4, ktorý má odhadom 1,76 bilióna parametrov.

Ako to funguje – jednoducho

Predstavte si GPT ako obrovský štatistický model, ktorý sa naučil pravdepodobnosti slovných spojení. Keď mu napíšete „Mačka sedí na…“, on spočíta, ktoré slovo najpravdepodobnejšie nasleduje – „stoličke“, „koberci“ alebo „streche“. Robí to slovo po slove, v milisekundách.

Kľúčový trik je v architektúre Transformer (transformátor), ktorú OpenAI prevzala z výskumu Google v roku 2017. Namiesto čítania textu od začiatku do konca analyzuje všetky slová naraz a hľadá ich vzájomné súvislosti. Vďaka tomu GPT chápe kontext – napríklad že „bank“ v „riečna banka“ a „banková karta“ znamená niečo úplne iné.

Tréning prebieha v dvoch fázach: 1. Predtrénovanie (pre-training) – model „prečíta“ stovky miliárd slov z kníh, článkov a webov, aby sa naučil štruktúru jazyka. 2. Doladenie (fine-tuning) – ľudskí hodnotitelia ručne vyberajú najlepšie odpovede, čím model učia, čo je správne a čo nie.

Konkrétne verzie a ich rozdiely

GPT-1 (2018)

117 miliónov parametrov. Skôr experiment – vedel tvoriť vety, ale dialóg bol trhaný.

GPT-2 (2019)

1,5 miliardy parametrov. OpenAI ho pôvodne nevydala verejne zo strachu pred zneužitím na generovanie falošných správ. Dnes je open-source a beží na bežnom notebooku.

GPT-3 (2020)

175 miliárd parametrov. Zlomový bod – prvý model, ktorý vedel písať eseje, básne aj kód na úrovni priemerného človeka. Cena: približne 0,02 € za 1 000 tokenov (cca 750 slov).

GPT-3.5 (2022)

Doladená verzia, ktorá poháňa bezplatný ChatGPT. Oproti GPT-3 je lacnejšia (0,002 € za 1 000 tokenov) a lepšie rozumie inštrukciám. Stále však halucinuje – vymýšľa si fakty s presvedčivým tónom.

GPT-4 (2023)

Aktuálny špičkový model. Odhaduje sa 1,76 bilióna parametrov (hoci OpenAI presné číslo tají). Dokáže spracovať obrázky – napríklad opísať graf alebo prečítať text z fotografie. Je o 40 % presnejší v testoch ako GPT-3.5, no cena je 0,03 € za 1 000 tokenov (vstup) a 0,06 € za 1 000 tokenov (výstup).

GPT-4 Turbo (november 2023)

Rýchlejší a lacnejší variant (0,01 € vstup, 0,03 € výstup). Pracuje s kontextom až 128 000 tokenov – to je zhruba 300 strán textu.

GPT-4o (máj 2024)

Multimodálny model, ktorý v reálnom čase spracúva zvuk, text aj obraz. Revolučný v tom, že oneskorenie odpovede je pod 300 ms – rozprávate sa s ním ako s človekom.

Reálne príklady z praxe

Príklad 1: Programátor Vývojár potrebuje doladiť kód v Pythone. Napíše chybovú hlášku do ChatGPT s GPT-4, model identifikuje chýbajúcu import knižnicu a navrhne opravu za 5 sekúnd. Ručne by hľadal 15 minút.

Príklad 2: Marketér Copywriter potrebuje 10 variantov nadpisu pre produktovú stránku. GPT-4 vygeneruje nápady vrátane emoji a SEO kľúčových slov. Ušetrí 2 hodiny práce.

Príklad 3: Študent Študent nechá GPT-4 napísať esej o klimatickej zmene. Model vygeneruje 500 slov, no keď si študent overí citáty, zistí, že dve z nich sú vymyslené. Toto je typická pasca – GPT halucinuje s presvedčivým tónom.

Časté omyly a na čo si dať pozor

1. GPT nie je inteligentný, je to štatistický papagáj Model nerozumie významu, iba predpovedá slová. Keď sa spýtate „Koľko je 2+2?“, nepočíta – odpovedá, lebo v tréningových dátach videl tisíce príkladov, že odpoveď je 4.

2. Halucinácie sú prirodzená vlastnosť GPT si vymýšľa fakty, najmä pri špecializovaných témach (medicína, právo). Štúdia z apríla 2024 ukázala, že GPT-4 halucinuje v 15 – 20 % odpovedí na odborné otázky.

3. Cena rýchlo narastá Bezplatný ChatGPT používa GPT-3.5. Ak chcete GPT-4, stojí to 20 € mesačne (ChatGPT Plus) alebo platíte za API tokeny. Pri firemnom nasadení s tisíckami požiadaviek denne môže účet za API dosiahnuť stovky eur mesačne.

4. Ochrana súkromia OpenAI ukladá a analyzuje vaše konverzácie (pokiaľ si neaktivujete režim bez ukladania). Firemné dáta by ste nemali posielať do verejného ChatGPT bez zmluvy o ochrane údajov.

Verdikt: Čo si vybrať

Pre bežné otázky a kreatívne úlohy vám postačí GPT-3.5 (zadarmo v ChatGPT). Ak potrebujete presnosť, analýzu obrázkov alebo dlhý kontext, siahnite po GPT-4 (20 €/mesiac). Pre firemné nasadenie s vlastnými dátami zvážte GPT-4 Turbo – je rýchlejší a lacnejší.

Pamätajte: GPT je nástroj, nie oracle. Každú faktickú informáciu si overte. V opačnom prípade vám model s úsmevom napíše, že Mesiac je vyrobený z bryndze.

Súvisiace pojmy

  • LLM (Large Language Model) – všeobecná kategória modelov, do ktorej GPT patrí
  • Transformer – architektúra, na ktorej GPT stojí
  • Token – základná jednotka, ktorú model spracúva (slovo alebo jeho časť)
  • Prompt engineering – umenie formulovať otázky tak, aby model dal správnu odpoveď

Podrobnejšie články a návody nájdete na ai.ezin.sk.