ChatGPT opušteno prolazi testove potrebne za medicinske licence i poslovne diplome

ChatGPT, viralni AI četbot koji je izazvao zabrinutost nastavnika i akademika zbog svoje sposobnosti da vara na esejima i ispitima, sada je položio završni ispit Vorton MBA, i skoro pa položio ispit za medicinsko licenciranje u Sjedinjenim Državama, kao i komponente pravosudnog ispita.

Profesor sa Vortona je sproveo studiju u kojoj je koristio OpenAI-jev GPT-3, jezički model na kojem je izgrađen ChatGPT, za polaganje završnog ispita osnovnog MBA kursa. Zaključio je da bi GPT-3 na ispitu dobio od B do B-.

Profesor Kristijan Tjuriš otkrio je da GPT-3 najbolje odgovara „na pitanja upravljanja osnovnim operacijama i analize procesa“. Na njih je četbot pružio i tačne odgovore i odlična objašnjenja zašto je odabran baš taj odgovor. U rezimeu rada, Tjuriš je priznao da GPT-3 nikako nije savršen. Ponekad je bot pravio greške u jednostavnim matematičkim proračunima i nije bio u stanju da se nosi sa naprednijim pitanjima analize procesa.

Ova studija je dodatno podstakla razgovor među akademicima oko ChatGPT-ovih naprednih veština pisanja, što povlači i priču u vezi sa ispitnim smernicama i šta znači koristiti ChatGPT kao resurs, a ne kao zamenu za određene veštine.

Istraživači su takođe testirali ChatGPT na ispitu za medicinsko licenciranje u Sjedinjenim Državama (USMLE), koji je ispit iz tri dela koji je potreban za dobijanje medicinske licence u SAD svim diplomcima medicinskih fakulteta. Otkrili su da je ChatGPT bio blizu ili na pragu prolaznosti za tri ispita i pokazao visok nivo doslednosti i uvida u svojim objašnjenjima.

Istraživači su zaključili da veliki jezički modeli poput ChatGPT-a imaju potencijal da pomognu u medicinskom obrazovanju i donošenju odluka. List navodi da su kliničari u okviru virtuelne klinike pod nazivom Ansible Health već počeli da eksperimentišu sa ChatGPT-om u pomaganju pri pisanju zadataka, kao što je sastavljanje pisama žalbe i pojednostavljivanje komplikovanih medicinskih izveštaja kako bi pacijentima pomogli da bolje razumeju svoja stanja.

Proširujući oblasti u kojima je stručan, ChatGPT je postigao stopu tačnosti od 50 procenata na komponenti pravosudnog ispita sa višestrukim izborom ili višedržavnog pravosudnog ispita (MBE). Pravosudni ispit je test koji diplomci pravnog fakulteta moraju da polože da bi se zvanično bavili advokaturom i sastoji se iz tri dela, pri čemu je MBE prvi. Prema jednoj studiji, rezultat GPT-3.5 od 50 procenata je veći od osnovne stope pogađanja od 25 procenata, što je verovatnoća tačnog odgovora kada se nasumično bira između četiri opcije sa višestrukim izborom. GPT-3.5 je dostigao prosečnu stopu prolaznosti na testovima za delikte i dokaze, što su dve od sedam predmetnih oblasti. Istraživači su zaključili da će zahvaljujući ovim rezultatima veliki jezički model kao što je GPT moći da „položi MBE komponentu pravosudnog ispita u bliskoj budućnosti“.

Aleks Tabarok, profesor ekonomije na Univerzitetu Džordž Mejson, testirao je konkurentskog četbota po imenu Klod AI na ispitu iz prava i ekonomije, najavljujući da je AI dobio „graničnu prolaznost“ na ispitu.

Kako veliki jezički modeli kao što su ChatGPT i Claude AI nadmašuju većinu ljudskih bića u svojoj sposobnosti da polažu ispite na visokom nivou bez godina učenja i sticanja diploma, to dovodi do preispitivanja smernica koje koristimo za određivanje akademskog uspeha.

Iako je malo verovatno da će ChatGPT učiniti visoko obrazovanje prevaziđenim, mnogi ljudi žele da se zaštite od nesputane upotrebe alata. 22-godišnji student po imenu Edvard Tian trenutno razvija aplikaciju koja može da otkrije tekst koji je generisao ChatGPT. „Svako zaslužuje da iskoristi prednosti veštačke inteligencije, tako da su nam potrebne zaštitne mere kako ove nove tehnologije ne bi bile zloupotrebljene“, rekao je Tian za Motherboard.

Iako je ChatGPT još uvek u beta verziji, milioni ljudi koriste ovu alatku u brojne svrhe, od pregovaranja o računima za internet do stvaranja virtuelne „žene“. U ponedeljak je objavljeno da Microsoft ulaže 10 milijardi dolara u OpenAI, matičnu kompaniju koja stoji iza ChatGPT-a i generatora slike na osnovu teksta nazvanog DALL-E. Ovo je značajno povećanje u početnoj investiciji od milijardu dolara u kompaniju u 2019. godini i dolazi nakon što je Microsoft objavio da će otpustiti 10.000 zaposlenih prošle srede.