ChatGPT je, posle bitcoina, postao nova tema koja razbija neprijatnu tišinu na slavama i dečijim rođendanima. Razgovor brzo prelazi na duboka pitanja o tome šta je uopšte inteligencije, koja je vrednost čoveka ako više nije najinteligentnije biće na planeti zemlji kao i metafizičkim izletima u pitanja o tome šta je uopšte svest. Svakako, značajno bolje teme od bitcoin/NFT-a.

ChatGPT je zaista impresivan. Postoje trenuci u istoriji koji svedocima ostavljaju utisak magičnosti. Verujem da su svedoci prve lokomotive, sijalice ili bioskopskog projektora bili zatečeni magijom tih novih pronalazaka. Ili, kao malo moderniji primer, ja se i dalje sećam neverice koju sam osetio u ranoj osnovnoj školi kada sam prvi put video 3D grafiku. ChatGPT je jedan od takvih primera, pogotovo za ljude koji nisu pratili dosadašnji razvoj jezičkih modela.

Ali, kao što su domoroci verovali da fotoaparat uslikanom oduzima dušu, ChatGPT sa sobom donosi niz predrasuda. Ovo je pogotovo plodno tlo za predrasude jer u nekim slučajevima ChatGPT zvuči izuzetno mudro i zrelo, posedujući znanje kom čovek ne može da parira.

ChatGPT će se pokazati u najboljem svetlu kada odgovara na pitanja koja ne zahtevaju korak u nepoznatno. Tačnije, kada piše o temi koja je već pokrivena u podacima nad kojim je treniran i ne zahteva logičko povezivanje koje vodi ka originalnim zaključcima. Naravno, mogućnost odgovoranja na kompleksne upite koji su uneti u formi ljudskog jezika predstavlja veliko tehnološko dostignuće i korak u evoluciji pretraživača.

Cilj ovog posta je da ispita kako se ChatGPT nosi sa pitanjima koja zahtevaju logičko rezonovanje i čiji se odgovor ne može naći web pretragom. Kao test uzećemo školsko takmičenje iz matematike za treći razred osnovne škole.

test

Pa da krenemo.

test

Za sada veoma impresivno.

test

Idemo dalje.

test

Ok, ovo nije baš najsrećniji odgovor. Hajde da pokušamo da zadamo zadatak na engleskom.

test

Nikakav napredak. Hajde da pokušamo da mu pomognemo.

test

0/20. Idemo dalje.

test

Ok, i mene uvek buni šta je koja stotina. Hajde da budemo precizniji.

test

0/20. Idemo dalje.

test

Odgovor je interesantan, iako netačan. Za prvi deo može da dobije 5 poena, iako je netačan. Drugi deo je interesantan jer je progutao cifru 3 na kraju. Moja pretpostavka je da se ovo dešava jer desetocifreni brojevi izlaze iz opsega 32 bitnih celih brojeva, gde je najveći broj 2^32=4294967296. Izgleda da ChatGPT poznaje koncept broja i ne tretira ga samo kao niz karaktera. U ovom zadataku, gde su bitne i slovna reprezentacija broja i njegova prava vrednost ChatGPT odlučuje jednostavno da ignoriše poslednju cifru.

Hajde da mu malo pomognemo.

test

0/20.

Krajnji rezultat je 40/100, što je impresivno, ali nedovoljno za prolaz na opštinsko takmičenje.