Strategi AI Sumber Terbuka Meta: Akankah Llama 3 Menjadi GPT-4 Berikutnya?

Menurut rumor yang beredar, Meta sedang dalam proses mengembangkan Llama 3, sebuah model bahasa yang bertujuan untuk bersaing dengan GPT-4 OpenAI. Informasi ini dilaporkan didengar oleh Insinyur OpenAI Jason Wei, yang sebelumnya terkait dengan Google Brain, selama acara sosial Generative AI Group yang diselenggarakan oleh Meta.

Tweet Wei tentang masalah ini menunjukkan bahwa Meta memiliki sumber daya komputasi untuk melatih Llama 3 dan penggantinya, Llama 4. Khususnya, jika Llama 3 mencapai kinerja yang sebanding dengan GPT-4, maka Llama 3 akan tetap bisa mencapai performa yang sebanding dengan GPT-4. bersumber terbuka, seperti yang ditunjukkan oleh pernyataan dari perwakilan Meta: “Ya, kami akan melakukannya. Maaf orang-orang yang selaras.”

Garis Waktu dan Perbandingan

Secara historis, ada jeda lima bulan antara peluncuran Llama 1 pada Februari 2023 dan Llama 2 pada Juli 2023. Sedangkan Llama 2 telah dioptimalkan oleh komunitas sumber terbuka dan telah mencapai tingkat performa yang serupa dengan GPT-3.5 pada aplikasi tertentu, masih terdapat perbedaan performa yang signifikan jika dibandingkan dengan model sumber tertutup seperti GPT-4 dan PaLM-2 Google.

Strategi Meta dalam melakukan open source pada modelnya telah mendapatkan banyak perhatian dan pujian dari komunitas pengembang. Namun, komitmen perusahaan terhadap open source dipertanyakan, terutama mengingat keputusan untuk menggunakan LLaMA open source baru diambil setelah modelnya bocor.

Meta mengaku terbuka mengenai AI-nya , menawarkan lisensi komunitas untuk Llama 2. Perusahaan berpendapat bahwa keterbukaan akan menghasilkan lebih banyak inovasi dan keamanan dalam AI. Perusahaan mengundang komunitas untuk menguji Kode Llama, menemukan masalah, dan memperbaikinya.

Tetapi studi terbaru mengatakan bahwa Meta dan perusahaan lain tidak terlalu terbuka tentang model AI mereka. Penelitian yang dilakukan oleh pakar AI dari Radboud University di Nijmegen, Belanda, menunjukkan bahwa beberapa LLM AI terkuat disembunyikan dari publik karena kode yang melatih mereka tidak dibagikan.

Studi tersebut diberi nama OpenAI dan Meta sebagai pembuat LLM paling tertutup dan mengatakan bahwa hal ini merugikan komunitas AI. Hal ini menuntut lebih banyak kejujuran dan keterbukaan dari perusahaan, sehingga orang lain dapat belajar dari pekerjaan mereka dan menjadikannya lebih baik.

Dominasi OpenAI di Pasar LLM

Terlepas dari upaya Meta, OpenAI tetap menjadi sebuah kekuatan dominan di pasar model bahasa besar (LLM). Tujuan utama Meta dengan model Llama adalah untuk menantang keunggulan OpenAI di domain ini. CEO OpenAI, Sam Altman, menyebutkan pada bulan Juni 2023 bahwa peluncuran GPT-5 belum dalam waktu dekat. Sementara itu, Google berencana untuk memperkenalkan Gemini, LLM multimoda generasi berikutnya, pada akhir tahun ini atau awal tahun depan.

Peralihan ke model AI yang kuat dan bersumber terbuka telah menimbulkan kekhawatiran di komunitas teknologi. Sam Altman dari OpenAI sebelumnya pernah bercanda tentang penerapan “tombol mematikan” untuk sistem OpenAI, dan menyoroti potensi risiko sistem AI menjadi tidak baik. Dengan kemungkinan Meta menjadi sumber terbuka model tingkat GPT-5, muncul kekhawatiran tentang kurangnya “ kill switch”untuk model-model tersebut, sehingga berpotensi memungkinkan aktor jahat untuk mempersenjatai mereka.

Meskipun semakin banyak model sumber terbuka, pengaruh OpenAI tetap terlihat jelas. Sebagian besar model dalam ekosistem sumber terbuka diukur berdasarkan GPT-3 dan GPT-4, khususnya pada HumanEval benchmark yang dikembangkan oleh OpenAI. Meskipun Meta merilis model Llama 3 sumber terbuka dengan kemampuan yang setara dengan GPT-4, kemungkinan besar model tersebut masih akan dievaluasi menggunakan HumanEval. Selain itu, OpenAI, bekerja sama dengan Anthropic, Google, dan Microsoft, telah meluncurkan Frontier Model Forum untuk memastikan pengembangan model AI yang aman dan bertanggung jawab.