Suurte keelemudelite arendaja AI21 Labs avaldas oma värske Turingi uuringu “Inimene või mitte” tulemused. Osalejad pandi kaheks minutiks vestlema ning seejärel paluti neil ära arvata, kas nad vestlesid inimese või tehisintellekti vestlusrobotiga.
Pärast enam kui kuu aega kestnud miljoneid teste näitasid tulemused, et 32 protsenti inimestest ei suuda teha vahet inimesel ja tehisintellektil. “Inimene või mitte?” kasutas tehisintellekti robotit, mis põhines juhtivatel keelemudelitel, nagu GPT-4 ja Jurassic-2.
Veel mõned testist selgunud tulemused – 68 protsenti inimestest arvavad õigesti, kui neilt küsitakse, kas nad rääkisid kaasinimese või AI-botiga. Inimestel oli lihtsam kaasinimesi tuvastada – inimestega vesteldes arvasid osalejad 73 protsendil juhtudest õigesti. Bottidega rääkides arvasid osalejad õigesti vaid 60 protsendil juhtudest.
Prantsusmaal on kõige rohkem õigeid arvajaid 71,3 protsenti (üle üldise keskmise 68 protsenti), samas kui Indias on kõige madalam õigete arvamiste protsent – 63,5.
Mõned populaarsemad kasutatud lähenemisviisid ja strateegiad, et välja selgitada, kas räägiti inimesega: inimesed kipuvad inimestega tuvastama õigekirja- ja grammatilisi vigu, slängi kasutamist ning viisakust peeti tehisintellektiks.
Allikas: AI21 Labs