Cerebras Kini Menjadi Prosesor Inferensi LLM Tercepat; Jaraknya Sangat Jauh.
Courtesy of Forbes

Rangkuman Berita: Cerebras Kini Menjadi Prosesor Inferensi LLM Tercepat; Jaraknya Sangat Jauh.

Forbes
Dari Forbes
18 November 2024 pukul 21.00 WIB
48 dibaca
Share
Perusahaan Cerebras baru saja mencapai prestasi luar biasa dengan model Llama-3.1 405B, yang kini 700 kali lebih cepat daripada superkomputer tercepat di dunia, Frontier, dalam simulasi dinamika molekuler. CEO Cerebras, Andrew Feldman, menyatakan bahwa tidak ada superkomputer di bumi yang dapat mencapai kinerja ini. Dengan kemampuan ini, para ilmuwan dapat menyelesaikan apa yang biasanya memakan waktu dua tahun dalam satu hari. Cerebras menggunakan teknologi Wafer Scale Engine (WSE) yang memberikan bandwidth memori 7.000 kali lebih banyak dibandingkan GPU biasa, sehingga memungkinkan mereka untuk memproses data dengan sangat cepat.
Cerebras juga mencatatkan rekor baru dengan kemampuan menjalankan 1,2 juta langkah simulasi per detik, yang berarti mereka dapat melakukan simulasi yang biasanya memakan waktu dua tahun dalam satu hari. Dengan kecepatan ini, Cerebras membuka peluang baru dalam penggunaan AI, termasuk kolaborasi multi-agen dan pemecahan masalah yang lebih kompleks. Meskipun biaya satu sistem CS3 diperkirakan antara Rp 32.89 ribu ($2) -3 juta, kinerja dan efisiensinya membuat investasi ini sebanding, terutama saat permintaan untuk perangkat keras inferensi AI terus meningkat.

Rangkuman Berita Serupa

CEO Nvidia mengatakan bahwa chip AI mereka berkembang lebih cepat daripada Hukum Moore.TechCrunch
Teknologi
3 bulan lalu
147 dibaca
CEO Nvidia mengatakan bahwa chip AI mereka berkembang lebih cepat daripada Hukum Moore.
O3 OpenAI menunjukkan bahwa model AI sedang berkembang dengan cara baru — tetapi begitu juga dengan biayanya.TechCrunch
Teknologi
4 bulan lalu
63 dibaca
O3 OpenAI menunjukkan bahwa model AI sedang berkembang dengan cara baru — tetapi begitu juga dengan biayanya.
Apakah Google Telah Mengalami Kemajuan Dalam Komputasi Kuantum dan AI?Forbes
Teknologi
4 bulan lalu
69 dibaca
Apakah Google Telah Mengalami Kemajuan Dalam Komputasi Kuantum dan AI?
Apakah Model Penalaran o1 dari Open AI Benar-Benar Akan Mengubah Dunia?Forbes
Teknologi
4 bulan lalu
66 dibaca
Apakah Model Penalaran o1 dari Open AI Benar-Benar Akan Mengubah Dunia?
Komputer Sekarang Berpikir Keras: AI Tingkat Selanjutnya dan Skala Waktu UjiForbes
Teknologi
5 bulan lalu
71 dibaca
Komputer Sekarang Berpikir Keras: AI Tingkat Selanjutnya dan Skala Waktu Uji
Menembus Tembok Memori AI GeneratifForbes
Teknologi
5 bulan lalu
120 dibaca
Menembus Tembok Memori AI Generatif
Pasar AI Mungkin Segera Mengalami Penundaan Namun Akan Akhirnya Mencapai Tingkat BaruForbes
Teknologi
5 bulan lalu
36 dibaca
Pasar AI Mungkin Segera Mengalami Penundaan Namun Akan Akhirnya Mencapai Tingkat Baru