Courtesy of TechCrunch
Sebuah tes terkenal untuk kecerdasan umum buatan (AGI) semakin dekat untuk diselesaikan, tetapi penciptanya menganggap ini menunjukkan kelemahan dalam desain tes tersebut. Tes ini, yang disebut ARC-AGI, dirancang untuk mengevaluasi kemampuan sistem AI dalam mempelajari keterampilan baru di luar data yang telah dilatih. Meskipun AI terbaik saat ini dapat menyelesaikan sekitar 55,5% dari tugas-tugas dalam ARC-AGI, ini masih jauh dari ambang batas 85% yang dianggap setara dengan kecerdasan manusia. Pencipta tes, Francois Chollet, berpendapat bahwa banyak AI saat ini, terutama model bahasa besar (LLMs), lebih mengandalkan memori daripada kemampuan berpikir dan beradaptasi.
Chollet dan Mike Knoop, salah satu pendiri Zapier, telah meluncurkan kompetisi senilai Rp 16.45 miliar ($1 juta) untuk mendorong penelitian AI yang lebih baik dari ARC-AGI. Mereka mengakui bahwa banyak solusi yang diajukan dalam kompetisi tersebut tidak benar-benar menunjukkan kemajuan menuju AGI. Keduanya berencana untuk merilis versi kedua dari ARC-AGI dan mengadakan kompetisi baru pada tahun 2025 untuk mengatasi masalah ini. Namun, mereka juga menghadapi kritik karena mendefinisikan AGI dengan cara yang mungkin terlalu optimis, mengingat definisi AGI itu sendiri masih diperdebatkan.
Pertanyaan Terkait
Q
Apa itu ARC-AGI?A
ARC-AGI adalah singkatan dari 'Abstract and Reasoning Corpus for Artificial General Intelligence', yang dirancang untuk mengevaluasi kemampuan sistem AI dalam mengakuisisi keterampilan baru.Q
Siapa yang memperkenalkan ARC-AGI?A
Francois Chollet adalah orang yang memperkenalkan ARC-AGI pada tahun 2019.Q
Mengapa LLMs dianggap tidak mampu melakukan penalaran?A
LLMs dianggap tidak mampu melakukan penalaran karena mereka sepenuhnya bergantung pada memorisasi dan kesulitan dalam generalisasi.Q
Apa tujuan dari kompetisi AI yang diluncurkan oleh Chollet dan Knoop?A
Tujuan dari kompetisi AI adalah untuk mendorong penelitian di luar LLMs dan mengembangkan AI sumber terbuka yang dapat mengalahkan ARC-AGI.Q
Apa kritik yang dihadapi ARC-AGI?A
ARC-AGI menghadapi kritik karena dianggap tidak sempurna dan tidak memberikan sinyal yang berguna untuk kecerdasan umum.