Alibaba Cloud mengeluarkan General Question Answering 2.0, yang mengatasi GPT-3.5 dalam prestasi dan mempercepatkan usahanya untuk GPT-4

Pada 31 Oktober, Alibaba Cloud secara rasmi mengeluarkan Tongyi Qianwen 2.0, model besar dengan ratusan bilion parameter. Dalam 10 penilaian berwibawa, prestasi komprehensif Tongyi Qianwen 2.0 telah melebihi GPT-3.5 dan semakin pantas untuk mengejar GPT-4. Pada hari yang sama, APP Tongyi Qianwen telah dilancarkan secara rasmi di pasaran aplikasi mudah alih utama, dan semua orang boleh mengalami secara langsung keupayaan model terkini melalui APP.

Dalam tempoh 6 bulan lalu,Tongyi Qianwen 2.0 telah membuat lonjakan besar dalam prestasi Berbanding dengan versi 1.0 yang dikeluarkan pada bulan April, Tongyi Qianwen 2.0telah bertambah baik dalam pemahaman am, sastera. Tujuan Matematik, ingatan pengetahuan, rintangan halusinasi dan kebolehan lain semuanya telah dipertingkatkan dengan ketara. Pada masa ini, prestasi komprehensif Tongyi Qianwen telah melebihi GPT-3.5, mempercepatkan untuk mengejar GPT-4.

Gambar:

Tongyi Qianwen 2.0 prestasi komprehensif telah melebihi GPT-3.5 dan semakin pantas untuk mengejar GPT-4

MMLU,

C- Eval ,GSM8K , HumanEval, MATH dan 10 set penilaian tanda aras arus perdana yang lain, markah Tongyi Qianwen 2.0 secara keseluruhan mengatasi Llama-2-70B Meta, berbanding OpenAI's Chat-3.5, ia adalah sembilan kemenangan dan satu kekalahan, dan dibandingkan dengan GPT -4 Ia mempunyai empat kemenangan dan enam kekalahan, dan jurang dengan GPT-4 semakin mengecil. Keupayaan untuk memahami bahasa Cina dan Inggeris adalah kemahiran asas model bahasa besar.

Dari segi tugasan bahasa Inggeris, Tongyi Qianwen 2.0 mendapat markah 82.5 pada penanda aras MMLU, kedua selepas GPT-4 Dengan meningkatkan bilangan parameter dengan ketara, Tongyi Qianwen 2.0 dapat memahami dan memproses struktur dan konsep bahasa yang kompleks daripada tugas Cina, Tongyi Qianwen 2.0 mencapai markah tertinggi pada penanda aras C-Eval dengan kelebihan yang jelas Ini kerana model itu mempelajari lebih banyak korpus Cina semasa latihan, mengukuhkan lagi keupayaan pemahaman dan ekspresi bahasa Cina. Dalam bidang seperti penaakulan matematik dan pemahaman kod, Tongyi Qianwen 2.0 telah mencapai kemajuan yang ketara. Dalam ujian penanda aras penaakulan GSM8K, Tongyi Qianwen menduduki tempat kedua, menunjukkan keupayaan pengkomputeran dan penaakulan logik yang kukuh, dalam ujian HumanEval, skor Tongyi Qianwen mengikuti GPT-4 dan GPT-3.5, yang terutamanya mengukur keupayaan model untuk berskala besar; memahami dan melaksanakan serpihan kod adalah asas bagi model besar untuk digunakan dalam senario seperti bantuan pengaturcaraan dan pembaikan kod automatik. . Tongyi Qianwen 2.0 telah membuat pengoptimuman teknikal dari segi pematuhan arahan, penggunaan alat, penciptaan yang diperhalusi, dll., supaya ia boleh disepadukan dengan lebih baik ke dalam senario aplikasi hiliran.

Tapak web rasmi Model Besar Tongyi telah melancarkan fungsi berbilang modal dan pemalam, menyokong tugasan tersegmen seperti input imej dan penghuraian dokumen. Pada masa yang sama, 8 kumpulan model industri utama berdasarkan latihan model besar Tongyi sedang dalam talian,

Mereka adalah

Tongyi Lingma-pembantu pengekodan pintar, Zhiwen , pembantu membaca Tongyi Tongyi Tingwu - pembantu AI untuk kerja dan belajar

,

Tongyi Stardust - platform penciptaan watak yang diperibadikan, Tongyi Midas - pembantu pelaburan dan penyelidikan yang bijak,🜎

yi Pelanggan Pintar Xiaomi Perkhidmatan

, Tongyi Renxin-Pembantu Kesihatan Eksklusif Peribadi, Tongyi Farui-AI Perunding Undang-undang. 8 model industri utama berorientasikan kepada senario menegak yang paling popular, menggunakan data domain untuk latihan khusus. Pengguna boleh mengalami secara langsung fungsi model di tapak web rasmi, dan pembangun boleh menyepadukan keupayaan model ke dalam aplikasi dan perkhidmatan model besar mereka sendiri melalui pembenaman halaman web, panggilan API/SDK, dsb. . Alibaba Cloud telah bekerjasama dengan lebih daripada 60 industri Rakan kongsi utama menjalankan kerjasama yang mendalam untuk menggalakkan pelaksanaan Tongyi Qianwen dalam bidang pejabat, pelancongan kebudayaan, kuasa elektrik, hal ehwal kerajaan, insurans perubatan, pengangkutan, pembuatan, kewangan, pembangunan perisian dan bidang lain. Zhou Jingren mendedahkan bahawa Alibaba Cloud merancang untuk membuka sumber versi 72B Tongyi Qianwen dalam masa terdekat Sebelum ini, Alibaba Cloud telah menggunakan sumber terbuka model versi 7B dan 14B, dan muat turun kumulatif model telah melebihi. 1 juta. Alibaba Cloud akan terus menyokong pembangun dari semua lapisan masyarakat untuk menginovasi model dan aplikasi berdasarkan model sumber terbuka Tongyi Qianwen.

Gambar: Tongyi Qianwen 72B akan menjadi sumber terbuka tidak lama lagi

Atas ialah kandungan terperinci Alibaba Cloud mengeluarkan General Question Answering 2.0, yang mengatasi GPT-3.5 dalam prestasi dan mempercepatkan usahanya untuk GPT-4. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!