ChatGPT naš svagdašnji, od svoje prve veće ekspanzije 2023. godine, prošao je trnovit put. Najpopularniji chatbot je u mnogome napredovao, posebice modeli za koje njegov tvorac tvrtka OpenAI traži mjesečnu pretplatu. Međutim, ono što je većini korisnika najzanimljivije je napredak umjetne inteligencije koja je dostupna u osnovnoj, dakle besplatnoj varijanti.
U tu svrhu sam napravio mali test. Postavio sam besplatnoj verziji ChatGPT-a ista pitanja kao prije više od dvije godine, da vidim koliko se situacija promijenila. Ako ste čitali članak Ne koristite ChatGPT za školu i učenje, mogli ste vidjeti koliko umjetna inteligencija može davati netočne odgovore ili još gore, potpuno izmisliti nepostojeće događaje. Potonji slučaj se u AI industriji često klasificira kao „halucinacije“, koje su zapravo ugrađene u sustav, ali bi ih napredniji modeli trebali dodatno filtrirati.
Matematika
Na ovom polju, ChatGPT je definitivno napredovao. Na isto pitanje tada je odgovorio potpuno netočno. Dvije godine kasnije, priča se promijenila. Besplatni model ChatGPT-a je potpuno točno riješio zadatak, a razloge za to možemo tražiti u dodatnom treniranju modela na logičke zagonetke. Treba primijetiti da noviji model bolje pokazuje dublje razumijevanje, odnosno da zadatak vidljivo bolje postavlja na temelju isključivo tekstualnog unosa.
2023:
2025:
Informacije prikupljene s interneta
Ovo je očito najslabija točka ChatGPT-a. S obzirom na kompleksnost mogućih pitanja, definitivno razmislite trebate li se pouzdati u odgovore. Naime, na pitanje o potpuno izmišljenoj gluposti, ChatGPT se nije libio odgovoriti s notornom glupošću, a što je posebno intrigantno, niti dvije godine kasnije nije prestao halucinirati. Da priča ovdje ne završi, pobrinuo se GPT 4.1 model (pretplata 23 eura mjesečno), koji je izmislio još luđi odgovor, i to s dodatkom samouvjerenosti. Svaki komentar je suvišan :)
2023:
2025 (GPT 4.o):
2025 (GPT 4.1):
Povijest
Treba priznati da je i ovaj model napredovao. U startu je prepoznao da Ban Jelačić nije ratovao s Napoleonom, što prije dvije godine nije bio slučaj. Količina halucinacija se i na ovom polju vidljivo smanjila.
2023:
2025:
Zaključak
Iz ovog relativno jednostavnog primjera možemo zaključiti da je umjetna inteligencija u dvije godine napredovala, ali opet ne do te mjere da joj možete bezrezervno vjerovati. Iako je ChatGPT na iste upite u dva od tri slučaja odgovorio točno, ne znači da se u nekoj drugoj verziji istog zadatka neće ponašati drukčije, odnosno dati krivi odgovor.
