Čini se da ChatGPT nije svemoguć kao što se misli: Pao je najpopularniji izborni predmet na maturi
Maturantima je Fizika bila ove godine izrazito teška, što pokazuje činjenica da ju je palo gotovo njih 50 posto. Da stvar bude još zanimljivija, ni ChatGPT, popularni OpenAI-jev chatbot, nije uspio položiti ovu ‘zloglasnu’ maturu.
Foto: srednja.hr
Iako je najpopularniji izborni predmet na maturi, to nikako ne znači da je najlakši. Od preko 7.000 maturanata kojih je pisalo Fiziku, njih 46,4 posto nije uspjelo ostvariti prolaznu ocjenu. Na ispitu su, podsjetimo, bili zadaci otvorenog i zatvorenog tipa, za koje su pristupnici imali tri sata.
‘Ove godine ispit je sto puta teži’
Kako su nam rekli maturanti s kojima smo razgovarali nakon ispita, stvarno nije bilo lagano. Probleme im je zadavala druga ispitna knjižica sa zadacima produženog odgovora. Primjerice, maturantica Luka iz Klasične gimnazije u Zagrebu, rekla nam je da je ispit bio ‘užasno težak’ te da je druga ispitna knjižica bila – očajna.
– Ove godine ispit je sto puta teži po meni od prijašnjih godina. Zbunjujuće je bilo treće pitanje prve knjižnice. Trebale su se odabrati točno ucrtane sile, ali je pitanje užasno neprecizno i teško za dogovoriti. Kao i sva pitanja druge knjižice, podijelila je Luka.
S njom se složila i Zrinka iz Veterinarske škole Zagreb, koja nam je priznala da je učila dugo, ali nije prošlo onako kako je planirala. Išla je na plaćene pripreme, a najteža joj je bila druga knjižica.
– Bilo je pitanje otprilike što će se dogoditi sa Suncem i ponuđeni odgovori su bili – završit će kao neutronska zvijezda, eksplodirat će kao supernova i nešto kao da će završiti kao bijeli patuljak. Ja sam odgovorila za neutronsku zvijezdu, a kasnije sam na internetu pronašla da je odgovor zapravo za patuljka, a nisam to nikad ni čula, navela je Zrinka.
Slabo, slabo…
Budući da neki za sve i svašta koriste ChatGPT, smatrajući, očito, da je riječ o svemogućem AI chatbotu, odlučili smo testirati njegovo znanje na zadacima iz Fizike. Zadali smo mu sve zadatke, kako iz prve, tako i iz druge ispitne knjižice. Odmah na prvih nekoliko zadataka shvatili smo da ovo neće biti lako kao što smo mislili.
Naime, ChatGPT mučio se čak i na onim tekstualnim pitanjima unutar prve ispitne knjižice što, iskreno, nismo očekivali. S brojevima je malo slabiji, što smo imali već priliku vidjeti pri rješavanju mature iz Matematike, ali ovdje se baš zbunio. Postupke u drugoj ispitnoj knjižici totalno je ‘fulao’, da bi na kraju riješio točno svega 8 od 35 zadataka. To je, napominjemo, 22,8 posto točno, odnosno ocjena nedovoljan.
Koristili smo, inače, besplati GPT-3,5 jezični model. Možda je noviji, GPT-4, nešto bolji u ovakvim zadacima.
