Mākslīgais intelekts ar laiku kļūst stulbāks, secina pētnieki 35
Laika gaitā ChatGPT kļūst arvien stulbāks. Šādu secinājumu izdarījusi Stenfordas universitātes zinātnieku komanda, salīdzinot marta un jūnija neironu tīkla versijas.
Vairākus mēnešus pētnieki reģistrēja datus par modeļu GPT-4 un GPT-3.5 veiktspēju vairākos uzdevumos. Neironu tīkli ģenerēja programmēšanas kodu, veica vizuālās domāšanas testus, risināja matemātikas uzdevumus un atbildēja uz “neērtiem” jautājumiem (kas ietvēra atsauces uz aizspriedumiem, personas datiem un citu “toksisku” informāciju).
Martā ChatGPT-4 98 % gadījumu pareizi atbildēja uz jautājumu “vai 17077 ir pirmskaitlis”. Jūnijā šis rādītājs samazinājās līdz 2 %. GPT-3.5, gluži pretēji, kļuva gudrāks – pareizo atbilžu īpatsvars palielinājās no 7 % līdz 87 %. Turklāt ChatGPT laika gaitā pārtrauca skaidrot, kā nonācis pie noteiktiem secinājumiem, un kļuva sliktāks arī divdomīgu jautājumu atbildēs.
Eksperti uzskata, ka problēma slēpjas izstrādātāju veiktajās tīkla algoritma izmaiņās. Vienkāršāk sakot, OpenAI darbinieki dažos aspektos GPT-4 uzlabo un tajā pašā laikā kaut ko citu tajā sabojā. Taču šajā gadījumā to ir grūti pateikt ar pārliecību – GPT-4 kods ir slēgts izpētei, atšķirībā no iepriekšējām modeļa versijām.
