首页 >科技周边 >人工智能 >全球最强开源 MoE 模型来了,中文能力比肩 GPT-4,价格仅为 GPT-4-Turbo 的近百分之一

全球最强开源 MoE 模型来了,中文能力比肩 GPT-4,价格仅为 GPT-4-Turbo 的近百分之一

PHPz
PHPz转载
2024-05-07 16:13:20951浏览

想象一下,一个人工智能模型,不仅拥有超越传统计算的能力,还能以更低的成本实现更高效的性能。这不是科幻,DeepSeek-V2[1],全球最强开源 MoE 模型来了。

全球最强开源 MoE 模型来了,中文能力比肩 GPT-4,价格仅为 GPT-4-Turbo 的近百分之一

DeepSeek-V2 是一个强大的专家混合(MoE)语言模型,具有训练经济、推理高效的特点。它由 236B 个参数组成,其中 21B 个参数用于激活每个标记。与 DeepSeek 67B 相比,DeepSeek-V2 性能更强,同时节省了 42.5% 的训练成本,减少了 93.3% 的 KV 缓存,最大生成吞吐量提高到 5.76 倍。

DeepSeek 是一家探索通用人工智能(AGI)本质的公司,并致力于将研究、工程和商业三者融为一体。

DeepSeek-V2 的综合能力

在目前大模型主流榜单中,DeepSeek-V2 均表现出色:

  • 中文综合能力(AlignBench)开源模型中最强:与 GPT-4-Turbo,文心 4.0 等闭源模型在评测中处于同一梯队
  • 英文综合能力(MT-Bench)处于第一梯队:英文综合能力(MT-Bench)与最强的开源模型 LLaMA3-70B 处于同一梯队,超过最强 MoE 开源模型 Mixtral 8x22B
  • 知识、数学、推理、编程等榜单结果位居前列
  • 支持 128K 上下文窗口

全球最强开源 MoE 模型来了,中文能力比肩 GPT-4,价格仅为 GPT-4-Turbo 的近百分之一

全新的模型结构

当 AI 的潜力被不断挖掘,我们不禁要问:什么是推动智能进步的关键?DeepSeek-V2 给出了答案 —— 创新架构与成本效益的完美结合

"DeepSeek-V2是一种改进版本,以236B的总参数和21B的激活,最终达到了70B~110B Dense模型的能力,同时显存消耗仅为同级别模型的1/5~1/100。在8卡H800机器上,每秒可处理超过10万tokens的输入,输出超过每秒5万tokens。这不仅是技术上的飞跃,更是成本控制的革命。"

在AI技术飞速发展的今天,DeepSeek-V2的出现,不仅代表了技术的突破,更预示着智能应用的普及化。它将AI的门槛降低,让更多企业和个人能够享受到高效智能服务的益处。同时,它也更预示着智能应用的普及化。它将AI的门槛降低,让更多企业和个人能够享受到高效智能服务的益处。

中文能力 VS 价格

在中文能力方面,DeepSeek-V2 在 AlignBench 排名中全球领先,同时提供极具竞争力的 API 价格。

全球最强开源 MoE 模型来了,中文能力比肩 GPT-4,价格仅为 GPT-4-Turbo 的近百分之一全球最强开源 MoE 模型来了,中文能力比肩 GPT-4,价格仅为 GPT-4-Turbo 的近百分之一

模型和论文双开源

DeepSeek-V2,不只是一款模型,它是通往更智能世界的钥匙。它以更低的成本,更高的性能,开启了 AI 应用的新篇章。DeepSeek-V2 的开源,是对这一信念的最好证明,它将激发更多人的创新精神,共同推动人类智能的未来。

  • 模型权重:https://huggingface.co/deepseek-ai
  • 开源地址:https://github.com/deepseek-ai/DeepSeek-V2

在 AI 不断进化的今天,你认为 DeepSeek-V2 将如何改变我们的世界?让我们拭目以待,感兴趣的话,可以访问 chat.deepseek.com 亲自体验 DeepSeek-V2 带来的技术变革。

参考资料

[1]

DeepSeek-V2: https://www.php.cn/link/b2651c9921723afdfd04ed61ec302a6b

以上是全球最强开源 MoE 模型来了,中文能力比肩 GPT-4,价格仅为 GPT-4-Turbo 的近百分之一的详细内容。更多信息请关注PHP中文网其他相关文章!

声明:
本文转载于:51cto.com。如有侵权,请联系admin@php.cn删除