腾讯云发布智能数据湖计算AIDLC,打通数据处理到Agent应用全流程

絕刀狂花

絕刀狂花

2026-07-31

718人浏览

原创

从数据处理到agent的链路正经历显著简化。

7月30日,记者获悉,腾讯云正式推出智能数据湖计算平台AIDLC,聚焦自动驾驶、具身智能、Agent等前沿AI应用场景,提供涵盖数据治理、模型训练、在线推理及Agent应用构建的一站式能力。以腾讯自研的WorkBuddy为例,在接入AIDLC后,其处理同等规模数据的端到端耗时降低80%,完成相同任务所需的算力资源缩减至原先的约20%。

腾讯云发布智能数据湖计算AIDLC,打通数据处理到Agent应用全流程

(腾讯云智能湖计算AIDLC架构)

传统AI应用开发流程中,企业通常需先借助Spark进行数据清洗与特征工程,再将结果写入存储系统,随后由AI团队基于Ray等框架开展模型训练与推理。各环节分散于不同平台,导致数据频繁迁移,权限体系、元数据管理与算力调度也需独立维护。

为破解这一瓶颈,AIDLC首次实现Spark与Ray在统一平台内协同运行:Spark承担海量结构化/半结构化数据的预处理与特征构建,Ray则负责多模态数据解析、模型训练、实时推理以及Agent任务编排。二者共享底层数据湖、算力资源池与统一权限模型,数据加工完毕后可无缝流转至后续AI阶段,彻底消除跨平台搬运开销。

AIDLC采用Serverless设计理念,支持算力按需秒级伸缩、按实际使用时长精准计费,企业无需预置或运维专属集群。据悉,该平台也是业内首个在同一环境中提供生产级Spark与Ray全托管服务的数据湖计算平台。

情感新闻资讯类网站模板(带手机端)1.4.2
情感新闻资讯类网站模板(带手机端)1.4.2

情感新闻资讯类网站模板(带手机端),支持可视化,自定模型内容,简洁后台易上手,支持自定义内容栏目等。模板特点: 1、安装即用,自带人人站CMS内核及企业站展示功能(产品,新闻,案例展示等),并可根据需要增加表单 搜索等功能(自带模板) 2、带手机端 3、前端banner轮播图文本均已进行可视化配置 4、伪静态页面生成 5、支持内容模型、多语言、自定义表单、筛选、多条件搜索等功能 6、支持多种URL

下载

在异构算力整合方面,AIDLC将CPU、GPU、TPU等资源纳入统一调度池,依据任务类型(如ETL、训练、推理)动态分配最优硬件。任务终止后资源自动释放并复用于其他作业,有效缓解固定集群长期空转问题。整体资源利用率提升可达数倍,并已完成对国产主流GPU芯片的适配,助力企业在信创底座上稳定承载AI负载。

为进一步优化计算效能,AIDLC集成腾讯云自研向量化执行引擎Meson与多模态计算引擎Xpark。Meson全面兼容Spark API、SQL语法及主流生态组件,在标准基准测试中查询性能提升3.6倍,部分复杂分析场景加速比达5倍,CPU占用率下降近50%;Xpark面向文档、图像、音视频等多模态内容,内置超50种专用算子,相较开源方案推理吞吐量提升3倍,GPU利用率可持续维持在接近满载水平。

除强化数据处理与模型训练能力外,AIDLC亦深度适配Agent生命周期管理。Agent运行过程中生成的行为轨迹、记忆快照与用户反馈均可沉淀至数据湖,经清洗、标注与增量训练后反哺模型迭代;平台还通过MCP协议、Skills框架及OpenAPI能力开放接口,使WorkBuddy、CodeBuddy等Agent可直接调用平台的数据处理、模型训练与智能分析能力。

该范式已在腾讯内部规模化验证。WorkBuddy在日常交互中持续产出对话记录、文档解析结果及用户行为反馈,单字段数据量已达GB级别,月度数据增长逾100%。接入AIDLC后,上述数据可自动完成清洗、特征提取、模型微调及效果评估闭环,构建起高复用性的数据—训练一体化流水线。

在自动驾驶领域,博世测试车队每日采集海量视频流与传感器原始数据,其中抽帧与格式转换主要消耗CPU资源,而数据脱敏、模型训练与感知推理则高度依赖GPU。依托博世ARENA统一管控平台,相关数据处理、推理服务及部分训练任务已实现集中调度。目前,该平台已沉淀200余个标准化推理模板,日均执行推理任务超万个,显著加快自动驾驶“数据采集—模型迭代—实车验证”闭环效率。

随着企业AI演进路径由静态模型迈向动态Agent,数据平台的角色亦从支撑报表分析,跃迁为驱动Agent持续进化的核心基础设施。除AIDLC外,腾讯云已围绕Agent-Ready战略,构建起覆盖底层计算引擎、统一控制平面与上层DataAgent服务的全栈式数据平台体系,加速推动企业数据资产向可感知、可决策、可行动的智能应用转化。

相关专题

更多
墨刀AI提示词教学
墨刀AI提示词教学

本合集由PHP中文网精心整理,为您提供全面的墨刀AI提示词教学。内容涵盖高质量原型撰写公式与实操窍门,助您轻松掌握AI设计工具。无论是零基础入门还是进阶技巧,都能让您快速上手,大幅提升产品设计与协作效率。

2026.08.04

9

21

墨刀AI完整入门
墨刀AI完整入门

PHP中文网为您倾力打造墨刀AI保姆级入门指南完整版!本合集从零基础讲起,涵盖AI生成原型、提示词优化、图片转原型及多轮对话等核心功能。无论您是新手还是进阶用户,都能轻松掌握产品设计全流程。快来PHP中文网,一键解锁高效设计技巧,让想法即刻成型!

2026.08.04

7

20

墨刀AI进阶技巧
墨刀AI进阶技巧

本合集由PHP中文网精心整理,为您提供墨刀AI核心进阶策略指南。内容涵盖高效提示词写作、原型智能生成与微调、结构化导图制作及行业分析报告输出等实战技巧。助您轻松掌握AI设计工具,大幅提升产品设计与团队协作效率。

2026.08.04

8

14

火山引擎实名认证失败怎么办
火山引擎实名认证失败怎么办

火山引擎实名认证失败可能与证件信息填写错误、姓名或企业信息不一致、证件照片不清晰、营业执照状态异常、手机号验证失败或审核资料不完整有关。本专题整理个人认证、企业认证、资料上传、审核退回、重新提交和认证不通过的常见处理方法。

2026.08.04

4

10

火山引擎域名备案流程详解
火山引擎域名备案流程详解

火山引擎域名备案适合需要在火山引擎云服务器、对象存储、CDN或网站服务上绑定域名的用户参考。本专题整理备案入口、账号实名认证、备案类型选择、主体信息填写、网站信息提交、资料上传、初审核验、管局审核和备案失败排查,帮助用户完成网站上线前的备案流程。

2026.08.04

0

10

火山引擎DNS解析配置步骤
火山引擎DNS解析配置步骤

使用火山引擎DNS解析网站域名时,需要确认域名已完成管理接入,并正确配置服务器IP、CNAME地址或验证记录。本专题整理域名添加、记录类型选择、TTL设置、解析状态检查、备案和访问测试等流程,适合新手搭建网站时参考。

2026.08.04

3

10

火山引擎对象存储使用教程
火山引擎对象存储使用教程

火山引擎对象存储适合用于网站图片、视频文件、备份数据、静态资源和应用附件管理。本专题整理TOS控制台入口、存储桶创建、地域选择、权限设置、文件上传、访问链接生成、CDN加速、费用查看和常见上传或访问失败问题,帮助用户快速掌握对象存储基础操作。

2026.08.04

1

10

火山引擎云服务器使用教程
火山引擎云服务器使用教程

火山引擎云服务器使用教程适合第一次购买、部署和管理云服务器的用户参考。本专题整理控制台入口、实例创建、地域和配置选择、系统镜像设置、安全组放行、远程连接、网站部署、续费计费和常见连接失败问题,帮助用户快速完成云服务器基础使用流程。

2026.08.04

5

10

火山引擎API Key绑定大模型教程
火山引擎API Key绑定大模型教程

火山引擎API Key怎么绑定大模型适合需要在火山方舟、应用后台、脚本工具或AI编程软件中调用模型的开发者参考。本专题整理控制台服务开通、API Key创建、模型权限检查、模型ID选择、Base URL填写、调用测试和鉴权失败排查,帮助用户完成从密钥到模型调用的配置流程。

2026.08.04

2

10

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
腾讯问卷设置问卷操作指南
腾讯问卷设置问卷操作指南

共0课时 | 0人学习

腾讯问卷 PC 端快速入门
腾讯问卷 PC 端快速入门

共0课时 | 0人学习

CodeBuddy官方文档
CodeBuddy官方文档

共0课时 | 0人学习