Framework Baru Mengubah Bahasa Alami Jadi Aksi Robot dalam Dunia Nyata

Para peneliti dari Huawei Noah’s Ark Lab, Technical University of Darmstadt, dan ETH Zurich mengembangkan sistem yang menghubungkan model bahasa besar dengan Robot Operating System (ROS). Sistem ini memungkinkan robot memahami perintah tertulis dan mengubahnya menjadi aksi fisik yang dapat dieksekusi secara otomatis. Framework memecah instruksi kompleks menjadi langkah kecil yang dapat dijalankan oleh robot. Terdapat dua metode eksekusi: dengan menghasilkan kode langsung atau dengan membuat behavior trees yang memungkinkan adaptasi jika langkah gagal. Robot juga dapat belajar keterampilan baru melalui imitasi dan refinemen berdasarkan umpan balik. Penelitian menunjukkan sistem ini handal dan fleksibel dalam berbagai skenario tugas nyata, termasuk tugas jangka panjang dan optimasi dinamis. Dengan kemampuan belajar dan adaptasi berkelanjutan, framework ini membuka jalan bagi penerapan robot yang lebih luas dan efektif dalam kehidupan sehari-hari dan lingkungan industri.