首頁 >科技週邊 >IT業界 >文心4.0在SuperBench評測中表現亮眼,多項指標領先

文心4.0在SuperBench評測中表現亮眼,多項指標領先

WBOY
WBOY轉載
2024-04-23 13:37:06531瀏覽

2024年3月,在清華大學基礎模型研究中心最近公佈的《SuperBench大模型綜合能力評測報告》中,該報告全面評估了14個在海內外具有影響力的模型。

在這份報告中,文字4.0的卓越表現引起了廣泛關注。其整體能已經接近了國際頂級模型,並正逐步縮小與全球領先模型的差距,顯示已經成為了國內領先的模型。

文心4.0在SuperBench評測中表現亮眼,多項指標領先

在人類對齊能力的評測中,文本4.0展現了出色的實力,毫無爭議地居國內首位。同時,在中文推理和中文語言能力的評測中,文本4.0也是一騎絕塵,與其他模型相比,其優點十分明顯。特別在中文理解的評測環節,文本4.0的得分比第二名的GLM-4高出了0.41分,顯示了其在中文處理上的深厚功底。

在語意理解的數學能力評測中,文本4.0和Claude-3模型並列全球首位,而知名的GPT-4系列模型則緊隨其後,位列第四和第五。其他模型的得分大多集中在55分左右,並領先群體體現在顯著的差距。

文心4.0在SuperBench評測中表現亮眼,多項指標領先

在閱讀理解能力的評測中,文心4.0同樣大放異彩。它不僅超越了GPT-4 Turbo和Claude-3,也超越了GLM-4,並斬獲了最高分。

在企業最為關注的安全性評測中,文本GPT 4.0也展現了卓越的表現。它達到了89.1分的高分超越了國際一流的GPT-4系列模型和Claude-3。位列第一,而Claude-3在這次評測中僅排在第四位。

報告也提到,自去年3月16日文心一言首次公開亮相以來,其在短短的時間內就實現了用戶數量的突破,目前已經超過2億用戶。同時,每天的API呼叫量也異常活躍,已經超過2億次。

以上是文心4.0在SuperBench評測中表現亮眼,多項指標領先的詳細內容。更多資訊請關注PHP中文網其他相關文章!

陳述:
本文轉載於:itbear.com。如有侵權,請聯絡admin@php.cn刪除