Rumah > Peranti teknologi > AI > teks badan

Menewaskan GPT-4o dalam beberapa saat, menewaskan Llama 3 70B dalam 22B, Mistral AI membuka model kod pertamanya

WBOY
Lepaskan: 2024-06-01 18:32:04
asal
433 orang telah melayarinya

Mistral AI, penanda aras unicorn AI Perancis terhadap OpenAI, telah membuat langkah baharu: Codestral, model kod besar pertama, telah dilahirkan.

速度秒掉GPT-4o、22B击败Llama 3 70B,Mistral AI开放首个代码模型

Sebagai model AI generatif terbuka yang direka khusus untuk tugas penjanaan kod, Codestral membantu pembangun menulis dan berinteraksi dengan kod dengan berkongsi arahan dan menyelesaikan titik akhir API. Kecekapan Codestral dalam pengekodan dan bahasa Inggeris membolehkan pembangun perisian mereka bentuk aplikasi AI lanjutan.

Codestral mempunyai saiz parameter 22B dan mengikut Lesen Bukan Pengeluaran Mistral AI yang baharu Ia boleh digunakan untuk tujuan penyelidikan dan ujian, tetapi penggunaan komersial adalah dilarang.

速度秒掉GPT-4o、22B击败Llama 3 70B,Mistral AI开放首个代码模型

Pada masa ini, model ini tersedia untuk dimuat turun di HuggingFace.

速度秒掉GPT-4o、22B击败Llama 3 70B,Mistral AI开放首个代码模型


  • Alamat muat turun: https://huggingface.co/mistralai/Codestral-22B-v0.1
  • alamat percubaan percuma co/LsgC84GCYw

Guillaume Lample, pengasas bersama dan ketua saintis Mistral AI, berkata Codestral boleh disepadukan dengan mudah ke dalam pemalam Kod VS.

速度秒掉GPT-4o、22B击败Llama 3 70B,Mistral AI开放首个代码模型

Sesetengah pengguna membandingkan Codestral dengan GPT-4o, dan Codestral secara langsung lebih pantas daripada GPT-4o.

速度秒掉GPT-4o、22B击败Llama 3 70B,Mistral AI开放首个代码模型

Mahir dalam 80+ Bahasa Pengaturcaraan

Codestral dilatih pada set data pelbagai yang mengandungi 80+ bahasa pengaturcaraan, termasuk Python, Java, C, C++, JavaScript, Bash dan bahasa pengaturcaraan popular yang lain. Ia juga berfungsi dengan baik pada bahasa pengaturcaraan seperti Swift dan Fortran.

Oleh itu, pangkalan bahasa yang luas memastikan Codestral boleh membantu pembangun dalam pelbagai persekitaran dan projek pengekodan.

Codestral boleh menulis kod, menulis ujian dan menggunakan mekanisme isi-tengah-tengah dengan cekap untuk melengkapkan mana-mana bahagian kod, menjimatkan masa dan tenaga pembangun. Menggunakan Codestral pada masa yang sama juga boleh membantu meningkatkan kemahiran pengekodan pembangun dan mengurangkan risiko ralat dan pepijat.

Standard Baharu untuk Prestasi Penjanaan Kod

Sebagai model parameter 22B, Codestral menetapkan standard baharu dari segi prestasi penjanaan kod dan ruang kepala kependaman berbanding model kod besar sebelumnya.

Seperti yang anda boleh lihat daripada Rajah 1 di bawah, panjang tetingkap konteks Codestral ialah 32k, produk pesaing CodeLlama 70B ialah 4k, DeepSeek Coder 33B ialah 16k, dan Llama 3 70B ialah 8k. Keputusan menunjukkan bahawa Codestral mengatasi model lain pada penanda aras penilaian jauh penjanaan kod RepoBench.

速度秒掉GPT-4o、22B击败Llama 3 70B,Mistral AI开放首个代码模型

Mistral AI juga membandingkan Codestral dengan model khusus kod sedia ada, yang memerlukan keperluan perkakasan yang lebih tinggi.

Persembahan menggunakan Python. Para penyelidik menggunakan tanda aras HumanEval pass@1 dan MBPP sanitized pass@1 untuk menilai keupayaan penjanaan kod Python Codestral selain itu, penyelidik juga menggunakan penilaian penanda aras CruxEval dan RepoBench EM.

Prestasi pada SQL. Untuk menilai prestasi Codestral dalam SQL, para penyelidik menggunakan penanda aras Spider.

Prestasi pada bahasa pengaturcaraan lain. Para penyelidik juga menilai Codestral dalam enam bahasa pengaturcaraan lain, termasuk C++, bash, Java, PHP, Typescript, dan C#, dan mengira purata penilaian ini.

速度秒掉GPT-4o、22B击败Llama 3 70B,Mistral AI开放首个代码模型

Penanda Aras FIM. Para penyelidik juga menilai keupayaan Codestral untuk melengkapkan kod apabila terdapat jurang dalam serpihan kod, terutamanya menjalankan eksperimen pada Python, JavaScript dan Java Keputusan menunjukkan bahawa pengguna boleh menjalankan kod yang dilengkapkan oleh Codestral dengan segera.

速度秒掉GPT-4o、22B击败Llama 3 70B,Mistral AI开放首个代码模型

Alamat blog: https://mistral.ai/news/codestral/

Atas ialah kandungan terperinci Menewaskan GPT-4o dalam beberapa saat, menewaskan Llama 3 70B dalam 22B, Mistral AI membuka model kod pertamanya. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!

Label berkaitan:
sumber:51cto.com
Kenyataan Laman Web ini
Kandungan artikel ini disumbangkan secara sukarela oleh netizen, dan hak cipta adalah milik pengarang asal. Laman web ini tidak memikul tanggungjawab undang-undang yang sepadan. Jika anda menemui sebarang kandungan yang disyaki plagiarisme atau pelanggaran, sila hubungi admin@php.cn
Tutorial Popular
Lagi>
Muat turun terkini
Lagi>
kesan web
Kod sumber laman web
Bahan laman web
Templat hujung hadapan