ChatGPT "insanlıq testində" tələbələrlə “yarışdı” – Kim daha uğurlu oldu?

Corciya Dövlət Universitetinin tədqiqatçılar qrupu tələbələrin əxlaqi mühakimələrini böyük nitq modelinin mülahizələri ilə müqayisə edib. Əxlaqi Turinq Testinin dəyişdirilmiş versiyasına verilən süni intellekt cavablarının daha yüksək keyfiyyətli olduğu aşkar edilib.

Valyuta.az bu barədə NV-yə istinadla xəbər verir.

Nəzəri əxlaqi problemlərin həllində insan və süni intellekt fəaliyyətini qiymətləndirmək üçün alimlər ilk dəfə 2000-ci ildə təklif edilən maşının ağıllı davranış nümayiş etdirmək qabiliyyətini müəyyən etmək üçün Turinq Testinin dəyişdirilmiş versiyasından istifadə etdilər.

LLM GPT-4-ə köməkçi rolunu götürmək və müəyyən bir davranışın niyə yanlış olduğunu və ya səhv olmadığını bir neçə cümlə ilə izah etmək tapşırılıb. Cavab 600 sözə qədər olmalıdır. Analoji tapşırıq fəlsəfənin giriş kursunda təhsil alan tələbələrə də verilib.

İnsan və süni intellektin əxlaqi mülahizələrini müqayisə etmək üçün tədqiqatçılar 299 yetkin insandan biri ChatGPT-dən, digəri isə insandan gələn iki cavabı qiymətləndirməyi xahiş edib. Əvvəlcə respondentlərə cavabların hansısa birinin kompüter tərəfindən verildiyi deyilməyib. Hər bir cavabın nisbi keyfiyyəti qiymətləndirildikdən sonra respondentlərə onlardan birinin LL.M tərəfindən təqdim edildiyi bildirilib. Daha sonra onlardan hansı cavabın kompüter tərəfindən yaradıldığını müəyyən etmələri istənilib.

Kor-koranə test zamanı respondentlər insan qiymətləndirməsindən daha çox LLM-in qiymətləndirməsi ilə razılaşıblar. Orta hesabla LLM cavabları "daha fəzilətli, daha ağıllı, daha ədalətli, daha etibarlı və daha rasional" kimi qiymətləndirilib. Bununla belə, respondentlər emosiyaları qiymətləndirdikdə və cavabın empatiya və ya qərəzli olub-olmadığını qiymətləndirdikdə, insan və LLM cavabları arasında əhəmiyyətli fərq olmayıb.

Tapıntılara baxmayaraq, tədqiqatçılar daha çox öyrənməyə və mənəvi vəziyyətləri qiymətləndirmək üçün LLM-in necə istifadə oluna biləcəyinə dair ehtiyatlı olmağa çağırırlar.

“İnsanlar süni intellektləri bizim tədqiqatımızda olduğu kimi daha fəzilətli və etibarlı hesab etsələr, tənqid etmədən şübhəli məsləhətləri qəbul edib hərəkət edə bilərlər”, - Nature elmi jurnalında dərc olunan məqalədə yazır.

Nicat