Moonshot AI telah merilis Kimi K3, sebuah model AI open-weight dengan 2,7 triliun parameter. Perusahaan tersebut menyatakan bahwa ini adalah model open-weight terbesar yang pernah dipublikasikan.
Apa itu open-weight
Model open-weight merilis parameter yang telah dilatih sehingga siapa pun dapat mengunduh dan menggunakannya. Ini berbeda dengan model tertutup yang menyimpan bobotnya secara privat dan hanya menyediakan akses melalui API. Para peneliti dan pengembang dapat menjalankan Kimi K3 di server mereka sendiri, melakukan fine-tune untuk tugas-tugas spesifik, atau mempelajari perilaku internalnya.
Skala model
2,7 triliun parameter adalah ukuran yang sangat besar. Belum ada model open-weight lain yang mencapai skala ini. Jumlah parameter merupakan metrik kunci untuk kapasitas model AI. Model yang lebih besar dapat menangani tugas yang lebih kompleks, tetapi juga membutuhkan sumber daya komputasi yang signifikan untuk dijalankan. Model ini kemungkinan akan digunakan oleh organisasi yang memiliki akses ke kluster GPU besar.
Moonshot AI belum membagikan hasil benchmark atau detail tentang data pelatihan untuk Kimi K3. Pengumuman tersebut berfokus pada ukuran model dan sifat open-weight-nya. Model ini tersedia untuk diunduh dari situs web perusahaan. Para peneliti kini dapat mengaksesnya dan mulai bereksperimen dengan kemampuannya.
