​ 蚂蚁集团周俊:万亿参数模型从“追求数量”迈向“深耕密度”

花韻仙語

花韻仙語

2026-07-10

435人浏览

原创

在最近举办的 aicon 大会上,蚂蚁集团副总裁周俊带来了一场备受关注的主题演讲,核心聚焦于万亿级参数大模型的效率优化路径。他指出,当前前沿 ai 模型的算力开销已达到惊人的水平——一个典型万亿参数模型仅运行15分钟,所消耗的计算资源成本就等同于一辆特斯拉汽车的价格。这一对比直击行业痛点,凸显出“提效降本”已成为智能体时代不可回避的关键命题。

为破解这一难题,周俊及其团队提出了一项范式级转变:不再盲目追求 Token 数量的堆叠,而是转向构建“更高 Token 密度”的新型处理范式。其技术底座是一项融合创新的线性注意力架构——“7份 Lightning Attention + 1份 MLA”。该设计成功将256K长度上下文的处理复杂度,从传统方案的指数级陡峭曲线压缩至近似线性增长,从而显著释放算力冗余,让有限资源更聚焦于真正的推理与决策过程。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜

​ 蚂蚁集团周俊:万亿参数模型从“追求数量”迈向“深耕密度”

与此同时,团队还集成了 Kpop 算法,精准区分工具调用指令与自然语言语义 Token;并辅以思维链剪枝、自蒸馏等协同优化手段。实测结果显示,在不牺牲模型能力的前提下,整体 Token 输出量下降约4倍。尤为值得关注的是,在 LongBench、BFCL 等权威 Agent 专项评测中,其千亿参数模型已超越部分参数规模更大的竞品;而在实际交互场景中,小型化模型的 flash 吞吐率提升达2.4倍,完成五轮多步对话所需的算力投入更是降低超10倍。

​ 蚂蚁集团周俊:万亿参数模型从“追求数量”迈向“深耕密度”

周俊此次分享不仅为大模型工程化落地提供了可复用的方法论,也为下一代智能体的轻量化、高响应、低成本演进指明了新方向。当算力瓶颈日益成为制约 AI 深度渗透各行业的现实障碍,蚂蚁集团所推动的这一系列效率革命,正悄然点亮行业前行的新灯塔。

划重点:

? 周俊揭示万亿参数模型15分钟运行成本≈一辆特斯拉,效率跃升已成当务之急。
? 团队推动范式迁移:从“更多 Token”迈向“更高 Token 密度”,混合注意力架构实现上下文成本线性可控。
? Kpop 算法叠加多项优化技术,在 Token 减量4倍的同时保持能力不衰减,千亿模型在多个 Agent 基准测试中实现越级表现。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
墨刀AI提示词教学
墨刀AI提示词教学

本合集由PHP中文网精心整理,为您提供全面的墨刀AI提示词教学。内容涵盖高质量原型撰写公式与实操窍门,助您轻松掌握AI设计工具。无论是零基础入门还是进阶技巧,都能让您快速上手,大幅提升产品设计与协作效率。

2026.08.04

8

21

墨刀AI完整入门
墨刀AI完整入门

PHP中文网为您倾力打造墨刀AI保姆级入门指南完整版!本合集从零基础讲起,涵盖AI生成原型、提示词优化、图片转原型及多轮对话等核心功能。无论您是新手还是进阶用户,都能轻松掌握产品设计全流程。快来PHP中文网,一键解锁高效设计技巧,让想法即刻成型!

2026.08.04

6

20

墨刀AI进阶技巧
墨刀AI进阶技巧

本合集由PHP中文网精心整理,为您提供墨刀AI核心进阶策略指南。内容涵盖高效提示词写作、原型智能生成与微调、结构化导图制作及行业分析报告输出等实战技巧。助您轻松掌握AI设计工具,大幅提升产品设计与团队协作效率。

2026.08.04

8

14

火山引擎实名认证失败怎么办
火山引擎实名认证失败怎么办

火山引擎实名认证失败可能与证件信息填写错误、姓名或企业信息不一致、证件照片不清晰、营业执照状态异常、手机号验证失败或审核资料不完整有关。本专题整理个人认证、企业认证、资料上传、审核退回、重新提交和认证不通过的常见处理方法。

2026.08.04

4

10

火山引擎域名备案流程详解
火山引擎域名备案流程详解

火山引擎域名备案适合需要在火山引擎云服务器、对象存储、CDN或网站服务上绑定域名的用户参考。本专题整理备案入口、账号实名认证、备案类型选择、主体信息填写、网站信息提交、资料上传、初审核验、管局审核和备案失败排查,帮助用户完成网站上线前的备案流程。

2026.08.04

0

10

火山引擎DNS解析配置步骤
火山引擎DNS解析配置步骤

使用火山引擎DNS解析网站域名时,需要确认域名已完成管理接入,并正确配置服务器IP、CNAME地址或验证记录。本专题整理域名添加、记录类型选择、TTL设置、解析状态检查、备案和访问测试等流程,适合新手搭建网站时参考。

2026.08.04

3

10

火山引擎对象存储使用教程
火山引擎对象存储使用教程

火山引擎对象存储适合用于网站图片、视频文件、备份数据、静态资源和应用附件管理。本专题整理TOS控制台入口、存储桶创建、地域选择、权限设置、文件上传、访问链接生成、CDN加速、费用查看和常见上传或访问失败问题,帮助用户快速掌握对象存储基础操作。

2026.08.04

1

10

火山引擎云服务器使用教程
火山引擎云服务器使用教程

火山引擎云服务器使用教程适合第一次购买、部署和管理云服务器的用户参考。本专题整理控制台入口、实例创建、地域和配置选择、系统镜像设置、安全组放行、远程连接、网站部署、续费计费和常见连接失败问题,帮助用户快速完成云服务器基础使用流程。

2026.08.04

5

10

火山引擎API Key绑定大模型教程
火山引擎API Key绑定大模型教程

火山引擎API Key怎么绑定大模型适合需要在火山方舟、应用后台、脚本工具或AI编程软件中调用模型的开发者参考。本专题整理控制台服务开通、API Key创建、模型权限检查、模型ID选择、Base URL填写、调用测试和鉴权失败排查,帮助用户完成从密钥到模型调用的配置流程。

2026.08.04

2

10

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
文心快码Agent使用手册
文心快码Agent使用手册

共0课时 | 0人学习

墨刀帮助中心
墨刀帮助中心

共0课时 | 0人学习

智谱AI开放平台手册
智谱AI开放平台手册

共0课时 | 0人学习