搜索
首页科技周边人工智能联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

Nov 11, 2023 am 09:01 AM
联发科 (mediatek)天玑(维度)ai大语言模型 (ai language model)

最新版的联发科5G生成式AI移动芯片天玑9300已发布,其新颖的全大核架构设计和新一代AI处理器APU以及联发科独有的尖端技术,为生成式AI应用提供了强大的性能支持,让使用者享受多彩丰富的生成式AI体验。比此,联发科还与大量AI行业企业加强合作,以在移动端打造丰富的AI生态。

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

全新第七代AI处理器APU 790,为生成式AI而生

随着用户对生成式人工智能应用的需求不断增长,端侧生成式人工智能的便捷性和安全性等优势也显露出来。当然,要部署端侧的人工智能大型语言模型,需要强大的人工智能计算能力的支持

天玑9300搭载联发科第七代AI处理器APU 790,为生成式AI而设计,拥有硬件级的生成式AI引擎,可以实现更加高速且安全的边缘AI计算,深度适配Transformer模型进行算子加速,速度是上一代的8倍。

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

同时APU 790的性能和能效得到显著提升,整数运算和浮点运算能力提升至前一代的2倍,苏黎世ETHZv5.1 AI-Benchmark Mobile Soc跑分2109 分,AI性能成功霸榜,功耗更是降低了45%。在强大的AI性能支持下,1秒以内即可生成图片。天玑9300强悍的AI算力、创新的全大核CPU架构和Immortalis-G720 GPU都为端侧运行生成式AI打下坚实的性能基础。

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

同时,基于亿级参数大语言模型的特性,联发科开发了混合精度 INT4 量化技术,结合联发科特有的内存硬件压缩技术NeuroPilot Compression,可以更高效地利用内存带宽,大幅减少AI大模型占用终端内存,为端侧运行AI大语言模型突破手机内存限制,助力更大参数模型在端侧落地。

基于以上,天玑9300首次在vivo旗舰手机端侧落地70亿参数AI大语言模型,处理速度可达20 Tokens每秒。不仅如此,联发科突破了行业极限,已经与vivo成功在端侧运行了130亿参数的大语言模型。甚至,天玑9300已率先实现在移动芯片上成功运行330亿参数的AI大语言模型,领跑业界。

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

天玑9300还支持多模态生成式AI大模型,打造出“文生诗”“文生图”“文生趣图”等丰富有趣的端侧体验。

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

可见,天玑9300的AI算力和端侧生成式AI能力已领先行业,足以让用户随时随地AI创造力全飙。

生成式AI模型端侧技能扩充,带来全面、丰富的端侧生成式AI体验

与云端生成式AI解决方案不同,由于硬件环境的差异,部署端侧生成式AI也需要考虑手机内存、存储容量、负载上限等因素。因此,联发科率先提出了先进的解决方案

APU 790 支持生成式AI模型端侧技能扩充技术NeuroPilot Fusion。该技术能够在端侧持续进行低秩自适应(LoRA,Low-Rank Adaptation)融合,基于基础大模型,通过云端训练,实现N个功能的融合,从而赋予基础大模型更全面、更丰富的生成式AI应用能力

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

例如,通过基于AI模型端侧技能扩充技术开发的“图生GIF动图”功能,用户可以根据一张照片更换不同的风格和表情,创造出独特的个性化表情包,瞬间成为表情包达人

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

AI开发平台NeuroPilot加速端侧生成式AI生态布局

天玑9300的APU 790通过强大的AI算力和先进的内存硬件压缩技术,以及AI模型端侧技能扩充等技术,将端侧生成式AI的速度和广度提升到了全新的水平。同时,联发科凭借其AI开发平台NeuroPilot构建了丰富的AI生态,从底层硬件到工具链、模型中心以及开发生态,助力生态快速、高效地部署端侧生成式AI应用,加速其在端侧的部署和普及

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

NeuroPilot是一款AI开发平台,它可以支持Android、Meta LIama 2、百度文心一言大模型、以及百川智能百川大模型等领先的AI大模型

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

NeuroPilot的另一个重要优势在于其先进的工具链,其中包括NeuroPilot Compression低秩自适应融合、Speculative Decoding推测解码加速以及模型优化与转化技术,这些都是非常完整的

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

联发科的天玑开发者中心还提供端侧生成式AI落地一站式开发者资源,分享端侧模型部署案例以提升开发效率。目前已有20多个生成式AI合作伙伴加入生态共建

联发科还携手业界合同伙伴打造精彩的生成式AI应用体验。虹软的生成式AI超级分辨率技术基于天玑9300 APU 边缘计算能力,相比前代,性能可提升30%。在25倍放大的拍摄时,利用生成式AI超级分辨率技术,可以拍出细节更真实的图像效果。

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

极感科技的生成式AI语意搜索技术也基于天玑9300 APU边缘计算能力,对比前代,性能可提升260%。比如在手机的相册中搜索照片,描述照片的内容即可在毫秒内精准搜到对应的照片。而且在断网状态下也能搜索,隐私也不会泄露。

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

Morpho的视频通话实时数字分身生成技术,利用天玑9300 APU边缘计算能力,性能比前代提升了26%。一般的虚拟人像生成器需要手动选择容貌样式,耗费时间。但是基于视频通话实时数字分身生成技术,用户操作简便,只需打开摄像头拍摄一帧照片,即可瞬间生成数字分身

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

慧鲤生成式AI防眩光技术能够在基于天玑9300 APU边缘计算的支持下,提升60%的性能。使用该技术时,无论在室内还是室外拍摄时,只需稍稍调暗光线,即可消除眩光干扰

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

可以看到,在AI端云融合的趋势下,天玑9300在AI算力、生成式AI用户体验和生态方面展现出全面的优势,为新一代旗舰级端侧生成式AI体验树立了新的标杆,强大生成式AI就要用天玑。

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

同时,以联发科为引领的生成式AI开拓者们正在通过持续技术创新和生态布局大力推动混合式AI计算的发展,为端侧生成式AI部署展开了一条独特且高效的道路,全力将生成式AI在端侧进行普及,以实现更多用户享受到端侧AI的个性化体验,开创全新的全场景智能体验,将科技的优势充分惠及大众。

以上是联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型的详细内容。更多信息请关注PHP中文网其他相关文章!

声明
本文转载于:搜狐。如有侵权,请联系admin@php.cn删除
AI游戏开发通过Upheaval的Dreamer Portal进入其代理时代AI游戏开发通过Upheaval的Dreamer Portal进入其代理时代May 02, 2025 am 11:17 AM

动荡游戏:与AI代理商的游戏开发彻底改变 Roupheaval是一家游戏开发工作室,由暴风雪和黑曜石等行业巨头的退伍军人组成,有望用其创新的AI驱动的Platfor革新游戏创作

Uber想成为您的Robotaxi商店,提供商会让他们吗?Uber想成为您的Robotaxi商店,提供商会让他们吗?May 02, 2025 am 11:16 AM

Uber的Robotaxi策略:自动驾驶汽车的骑车生态系统 在最近的Curbivore会议上,Uber的Richard Willder推出了他们成为Robotaxi提供商的乘车平台的策略。 利用他们在

AI代理玩电子游戏将改变未来的机器人AI代理玩电子游戏将改变未来的机器人May 02, 2025 am 11:15 AM

事实证明,视频游戏是尖端AI研究的宝贵测试场所,尤其是在自主代理和现实世界机器人的开发中,甚至有可能促进人工通用智能(AGI)的追求。 一个

创业公司工业综合体VC 3.0和James Currier的宣言创业公司工业综合体VC 3.0和James Currier的宣言May 02, 2025 am 11:14 AM

不断发展的风险投资格局的影响在媒体,财务报告和日常对话中显而易见。 但是,对投资者,初创企业和资金的具体后果经常被忽略。 风险资本3.0:范式

Adobe在Adobe Max London 2025更新创意云和萤火虫Adobe在Adobe Max London 2025更新创意云和萤火虫May 02, 2025 am 11:13 AM

Adobe Max London 2025对Creative Cloud和Firefly进行了重大更新,反映了向可访问性和生成AI的战略转变。 该分析结合了事件前简报中的见解,并融合了Adobe Leadership。 (注意:Adob

Llamacon宣布的所有元数据Llamacon宣布的所有元数据May 02, 2025 am 11:12 AM

Meta的Llamacon公告展示了一项综合的AI策略,旨在直接与OpenAI等封闭的AI系统竞争,同时为其开源模型创建了新的收入流。 这个多方面的方法目标bo

关于AI仅仅是普通技术的主张的酿造争议关于AI仅仅是普通技术的主张的酿造争议May 02, 2025 am 11:10 AM

人工智能领域对这一论断存在严重分歧。一些人坚称,是时候揭露“皇帝的新衣”了,而另一些人则强烈反对人工智能仅仅是普通技术的观点。 让我们来探讨一下。 对这一创新性人工智能突破的分析,是我持续撰写的福布斯专栏文章的一部分,该专栏涵盖人工智能领域的最新进展,包括识别和解释各种有影响力的人工智能复杂性(请点击此处查看链接)。 人工智能作为普通技术 首先,需要一些基本知识来为这场重要的讨论奠定基础。 目前有大量的研究致力于进一步发展人工智能。总目标是实现人工通用智能(AGI)甚至可能实现人工超级智能(AS

模型公民,为什么AI值是下一个业务码模型公民,为什么AI值是下一个业务码May 02, 2025 am 11:09 AM

公司AI模型的有效性现在是一个关键的性能指标。自AI BOOM以来,从编写生日邀请到编写软件代码的所有事物都将生成AI使用。 这导致了语言mod的扩散

See all articles

热AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智能驱动的应用程序,用于创建逼真的裸体照片

AI Clothes Remover

AI Clothes Remover

用于从照片中去除衣服的在线人工智能工具。

Undress AI Tool

Undress AI Tool

免费脱衣服图片

Clothoff.io

Clothoff.io

AI脱衣机

Video Face Swap

Video Face Swap

使用我们完全免费的人工智能换脸工具轻松在任何视频中换脸!

热工具

SublimeText3汉化版

SublimeText3汉化版

中文版,非常好用

VSCode Windows 64位 下载

VSCode Windows 64位 下载

微软推出的免费、功能强大的一款IDE编辑器

Dreamweaver CS6

Dreamweaver CS6

视觉化网页开发工具

Dreamweaver Mac版

Dreamweaver Mac版

视觉化网页开发工具

SublimeText3 Linux新版

SublimeText3 Linux新版

SublimeText3 Linux最新版