Xiao Zha secara rasmi mengumumkan kemas kini kelas berat Code Llama, menambah versi 70B, tetapi masih terdapat sekatan kapasiti

Model Kod Llama 70B yang lebih berkuasa ada di sini.

Hari ini, Meta secara rasmi mengeluarkan Kod Llama 70B, model terbesar dan berprestasi terbaik pernah ada dalam siri Kod Llama.

Kami membuka sumber versi Kod Llama yang dipertingkat, yang termasuk model parameter 70B yang lebih besar. Menulis dan menyunting kod telah menjadi salah satu penggunaan paling penting bagi model kecerdasan buatan moden. Ternyata untuk model AI, keupayaan untuk menulis kod adalah kunci untuk memproses maklumat dalam bidang lain dengan lebih teliti dan rasional. Saya amat berbangga dengan perkembangan ini dan tidak sabar-sabar untuk memasukkannya ke dalam Llama 3 dan model masa hadapan.

Kod Llama 70B tersedia dalam tiga versi yang sama seperti model Kod Llama yang dikeluarkan sebelum ini:

• CodeLlama - 70B , model kod asas - 70B; 0B - Python, 70B khusus untuk Python;
• Kod Llama - 70B - Arahan 70B, yang diperhalusi untuk memahami arahan bahasa semula jadi.

Kod Llama pada asalnya adalah alat yang dilancarkan oleh Meta pada Ogos 2023 dan percuma untuk penyelidikan dan kegunaan komersial.

Menurut catatan blog Meta AI, Kod Llama 70B boleh mengendalikan lebih banyak pertanyaan berbanding versi lain, yang bermaksud pembangun boleh memberikan lebih banyak petunjuk semasa pengaturcaraan dan ia boleh menjadi lebih tepat.

Dalam penanda aras HumanEval, Kod Llama 70B mencapai ketepatan 53%, lebih baik daripada 48.1% GPT-3.5, dan lebih dekat dengan 67% GPT-4 yang dilaporkan dalam kertas OpenAI.

Kod Llama dibina pada Llama 2 dan membantu pembangun membuat kod berdasarkan gesaan dan nyahpepijat kod tulisan manusia. Pada permulaan keluaran, Meta menyatakan bahawa lesen sumber terbuka Kod Llama adalah sama dengan Llama 2 dan percuma untuk tujuan penyelidikan dan komersial, begitu juga Kod Llama 70B.

Pada masa itu, terdapat tiga versi model siri Code Llama, dengan jumlah parameter masing-masing 7B, 13B dan 34B. Dan menyokong berbilang bahasa pengaturcaraan, termasuk Python, C++, Java, PHP, Typescript (Javascript), C# dan Bash.

Meta menyediakan versi Kod Llama termasuk:

Kod Llama, model kod asas; Llam a-Arahkan , semula jadi Versi perintah bahasa yang diperhalusi.

• Antaranya, dua model terakhir memfokuskan pada bahasa pengekodan tertentu. Kini Kod Llama 70B telah ditambahkan pada keluarga model ini, membawa tugas pengekodan ke tahap yang lain.
• Kod Llama 70B dilatih pada 1TB kod dan data berkaitan kod, dihoskan pada repositori kod Hugging Face.

Meta berkata modelnya yang lebih besar, model 34B dan 70B, mengembalikan hasil terbaik dan memberikan bantuan pengekodan yang lebih baik.

Tetapi dalam pengalaman pembangun, Kod Llama 70B masih mempunyai kelemahan yang jelas.

Sebagai contoh, seseorang mendapati bahawa Kod Llama 70B tidak dapat melengkapkan permintaan untuk menjana nombor perdana:

Sesetengah orang juga mengatakan bahawa sesetengah penggunaan buruk ini juga mengatakan bahawa beberapa had ini Menjana nombor perdana haram. Prima haram boleh digunakan untuk mewakili bahan yang dilarang daripada dimiliki atau diedarkan, dan pengedaran program sedemikian adalah menyalahi undang-undang di bawah Akta Hak Cipta Milenium Digital A.S..

^{Pautan rujukan: https://www.theverge.com/2024/1/29/24055011/meta-llama2-code-generator-generative-ai}

Bacaan berkaitan

Bacaan berkaitan
• Pada suatu hari, keupayaan pengekodan Kod Llama dipertingkatkan dengan pesat, dan versi HumanEval yang diperhalusi mendapat markah melalui GPT-4
• Sumber terbuka Kod Rasmi Llama: percuma untuk kegunaan komersil, versi misteri hampir dengan GPT -4

Atas ialah kandungan terperinci Xiao Zha secara rasmi mengumumkan kemas kini kelas berat Code Llama, menambah versi 70B, tetapi masih terdapat sekatan kapasiti. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!