首页  >  文章  >  科技周边  >  端到端自动驾驶、多模态场景大脑、全新3D交互:商汤绝影大模型即将亮相北京车展

端到端自动驾驶、多模态场景大脑、全新3D交互:商汤绝影大模型即将亮相北京车展

PHPz
PHPz转载
2024-04-19 16:10:01795浏览

端到端自动驾驶、多模态场景大脑、全新3D交互:商汤绝影大模型即将亮相北京车展

  • 商汤绝影将带来面向量产的真·端到端自动驾驶解决方案UniAD上车演示首秀
  • 商汤绝影打造敏锐洞察、深度思考、高效执行的多模态场景大脑
  • “Vision Pro”裸眼上车,商汤绝影将展示全球首创3D高精视线交互

2024年,北京国际汽车展览会将于4月25日至5月4日重磅回归。作为行业首个提出感知决策一体化自动驾驶通用模型的公司,商汤绝影将带来面向量产的真·端到端自动驾驶解决方案UniAD的上车演示首秀。同时还会展示以多模态场景大脑为核心的AI大模型座舱产品矩阵和全新座舱3D交互。

目前,通用人工智能正在和智能汽车产业深度融合,基于公司多年技术积累打造的一系列原生态汽车模型,商汤绝影将在北京车展带来众多涵盖智能驾驶和智能座舱的AI大模型产品和功能,为公众展示灵活自适应、深度个性化、安全可信赖、有人文关怀的未来体验。这些产品和功能的推出,将进一步加速智能汽车产业的发展和智慧出行的全新体验。

行业首个感知决策一体化自动驾驶通用模型UniAD上车演示首秀

商汤及其合作实验室提出了行业首个感知决策一体化自动驾驶通用模型UniAD,并于2023年荣获国际计算机视觉与模式识别会议(CVPR)最佳论文。该模型引领了引领学术界和工业界的端到端自动驾驶潮流,实现了端到端自动驾驶的流畅性。未来,自动驾驶将更加普及,商汤的技术将在自动驾驶领域中扮演重要角色,带领行业实现端到端自动驾驶的潮流。

最近,特斯拉开始向用户推送基于端到端算法的FSD V12版本,引起行业的广泛关注。在本届北京车展上,商汤继影响也将带来面向量产的感知决策一体化的真·端到端自动驾驶方案——UniAD,并首次面向公众展示UniAD的实车道路演示成果。

随着自动驾驶技术的不断演进,基于规则的智驾方案需要多传感器融合感知器大量投入资源来应对无保护左转、人车混行等复杂路况。而商汤绝影UniAD方案仅凭摄像头的视觉感知,无需高精度地图,通过数据学习和驱动就能够应对城区的复杂环境。不仅如此,在传统方案较难突破的无中线的乡村道路上,UniAD同样可以自如行驶,完成包括大角度左转桥、避让占道车辆及施工区域、绕行跑步行人等一系列高难度操作,真正做到“像人一样开车”。

为了增强端到端自动驾驶方案可解释性和交互能力,依托多模态大模型,商汤继影已研发出新一代自动驾驶大模型DriveAGI,适用场景更宽、性能更高、门槛更低,体验上做到可感知、可交互、可信赖。作为下一代自动驾驶技术,DriveAGI也将在车展期间展示预览。

商汤绝影打造敏锐洞察、深度思考、高效执行的多模态场景大脑

近期备受关注的小米SU7开启将AI大模型带进座舱。商汤绝影已打造出“多模态场景大脑”为核心的AI大模型座舱产品矩阵,通过多模态大模型、大语言模型、文生成模型等能力组合,为智能座舱注入强大的环境理解、逻辑思维和内容生成能力。

商汤绝影上车的AI大模型将能够基于地理位置推荐符合用户喜好的餐厅、介绍用户感兴趣的外部自然景物,并进行优质景点推荐。不仅如此,基于强大的多模态感知能力,搭载商汤绝影方案的车辆可以准确感知并识别车外的信息,包括周围车辆的车型、标志性建筑物等,以语音、图片或者视频等方式为舱内人员提供更为准确和全面的内容,帮助用户了解和掌握外部环境信息。

以多模态场景大脑为核心,商汤绝影已经推进量产落地一系列全景感知、主动关怀且富有创造力的AI大模型座舱产品,如“旅医”、“神笔”、“童伴”等创新功能,公众将能够在商汤绝影展台上感受到深度个性化且有人文关怀的智慧出行新体验。

Vision Pro“裸眼上车”,商汤绝影全球首创座舱3D视线交互即将亮相

2023年,Apple Vision Pro的横空出世让人们领略到了3D交互的魅力,商汤绝影通过深厚的技术研发实力和高效的创新迭代效率,将在车展上带来两大全新座舱3D交互演示:3D Gaze高精视线交互和3D动态手势交互。

作为全球首创的能够通过视线定位与屏幕图标进行交互的智能座舱技术,商汤绝影的3D Gaze高精视线交互将让用户通过眼神控制中控图标。3D 动态手势交互是行业领先的支持动态手势和手部微动作识别的智能座舱技术,能让用户通过手势“隔空”进行各类座舱交互。

商汤绝影这两大舱内3D交互功能相互配合,如同“Vision Pro”裸眼上车,为用户打造更符合人类直觉的自然交互体验。

AI大模型与汽车行业碰撞、融合之际,商汤绝影将充分发挥多年积累的领先技术优势和产品创新能力,持续为智能汽车产业注入AGI的新活力。4月25日起,欢迎莅临商汤绝影展位,共同探索AGI时代智能汽车的未来出行方式。

以上是端到端自动驾驶、多模态场景大脑、全新3D交互:商汤绝影大模型即将亮相北京车展的详细内容。更多信息请关注PHP中文网其他相关文章!

声明:
本文转载于:jiqizhixin.com。如有侵权,请联系admin@php.cn删除