AI大模型、空间计算已“上车”,商汤绝影全球首创座舱3D视线交互即将亮相

2024年04月19日23:35:15 科技 1777
AI大模型、空间计算已“上车”,商汤绝影全球首创座舱3D视线交互即将亮相 - 天天要闻

AI大模型、空间计算等前沿技术在汽车上的应用落地来得比预想更快。去年,Apple Vision Pro的横空出世让人们领略到了3D交互的魅力,在即将到来的2024北京国际汽车展览会,上海人工智能企业商汤科技将带来两大全新座舱3D交互演示:3D Gaze高精视线交互和3D动态手势交互。

同时,作为行业首个提出感知决策一体化自动驾驶通用模型的公司,商汤还将带来面向量产的真·端到端自动驾驶解决方案的上车演示首秀,还会展示以多模态场景大脑为核心的AI大模型座舱产品矩阵。

Vision Pro“裸眼上车”

3D 动态手势交互是行业领先的支持动态手势和手部微动作识别的智能座舱技术,能让用户通过手势“隔空”进行各类座舱交互。作为全球首创的能够通过视线定位与屏幕图标进行交互的智能座舱技术,商汤绝影的3D Gaze高精视线交互将让用户通过眼神控制中控图标。商汤绝影这两大舱内3D交互功能相互配合,如同“Vision Pro”裸眼上车,为用户打造更符合人类直觉的自然交互体验。

在智能座舱方面,商汤绝影已打造出“多模态场景大脑”为核心的AI大模型座舱产品矩阵,通过多模态大模型、大语言模型、文生图模型等能力组合,为智能座舱注入强大的环境理解、逻辑思维和内容生成能力。

商汤绝影上车的AI大模型将能够基于地理位置推荐符合用户喜好的餐厅、介绍用户感兴趣的外部自然景物,并进行优质景点推荐。不仅如此,基于强大的多模态感知能力,搭载商汤绝影方案的车辆可以准确感知并识别车外的信息,包括周围车辆的车型、标志性建筑物等,以语音、图片或者视频等方式为舱内人员提供更为准确和全面的内容,帮助用户了解和掌握外部环境信息。

“最佳论文”解决方案将迎来首秀

2022年底,商汤及其联合实验室提出了行业首个感知决策一体化自动驾驶通用模型UniAD,并于次年荣获2023年国际计算机视觉与模式识别会议(CVPR)最佳论文。

在本届北京车展上,商汤绝影也将带来面向量产的感知决策一体化的真·端到端自动驾驶解决方案——UniAD,并首次面向公众展示UniAD的实车道路演示成果。

随着自动驾驶技术的不断演进,基于规则的智驾方案需要多传感器融合感知且大量投入资源来应对无保护左转、人车混行等复杂路况。而商汤绝影UniAD方案仅凭摄像头的视觉感知,无需高精地图,通过数据学习和驱动就能够应对城区的复杂环境。不仅如此,在传统方案较难突破的无中线的乡村道路上,UniAD同样可以自如行驶,完成包括大角度左转上桥、避让占道车辆及施工区域、绕行跑步行人等一系列高难度操作,真正做到“像人一样开车”。

为了增强端到端自动驾驶方案可解释性和交互能力,依托多模态大模型,商汤绝影已研发出新一代自动驾驶大模型DriveAGI,适用场景更宽、性能更高、门槛更低,体验上做到可感知、可交互、可信赖。作为下一代自动驾驶技术,DriveAGI也将在车展期间进行前瞻预览。

科技分类资讯推荐

荣耀王班回应友商“干翻荣耀”传言 - 天天要闻

荣耀王班回应友商“干翻荣耀”传言

来源:环球网 【环球网科技综合报道】6月9日消息,近日,荣耀公司销售与服务总裁王班在社交平台回应称,“400首销之际,我听说有友商内部发通知,要干死荣耀,不让荣耀翻身。我们是否翻身不取决于任何其他人,而是取决于我们是否做对事情。
古尔曼:苹果可能不会在 WWDC 2025上发布新硬件 - 天天要闻

古尔曼:苹果可能不会在 WWDC 2025上发布新硬件

来源:环球网 【环球网科技综合报道】6月9日消息,据外媒报道,苹果可能不会在WWDC主题演讲中推出新硬件,而是仅涉及软件。彭博社马克·古尔曼 (Mark Gurman) 撰文称,苹果没有准备在 WWDC 期间发布任何新硬件。
京东高薪挖人抢滩酒旅市场 - 天天要闻

京东高薪挖人抢滩酒旅市场

京东高薪挖人抢滩酒旅市场:战略意图、行业影响与未来挑战万亿级市场潜力中国在线旅游市场2023年规模超1.5万亿元,年增长率超15%(艾瑞咨询数据)。后疫情时代,本地游、周边游需求爆发,高端度假、主题旅游(如露营、研学)成为新增长点。
Meta有意向人工智能初创公司Scale AI投资超过100亿美元 双方已在洽谈 - 天天要闻

Meta有意向人工智能初创公司Scale AI投资超过100亿美元 双方已在洽谈

【TechWeb】6月9日消息,据外媒报道,在生成式人工智能的热潮中,OpenAI、Anthropic、xAI等厂商也受到了资本市场的热捧,相继获得了多笔高额的投资,也在持续进行新的融资,其中由马斯克在2023年7月12日创立的xAI,在去年5月份融资60亿美元、11月份融资50亿美元后,又在进行50亿美元的债务融资。而从外媒最新的报道来看,人...
iGame M15 Origo评测:颜值与性能并存 搭载长江存储PC41Q 表现超预期 - 天天要闻

iGame M15 Origo评测:颜值与性能并存 搭载长江存储PC41Q 表现超预期

【ZOL中关村在线原创评测】前不久,七彩虹发布了旗下首款iGame游戏笔记本产品,我们也第一时间拿到了iGame M15 Origo轻薄全能游戏本。其搭载酷睿Ultra 9 285H处理器,显卡为RTX 5070 Laotop,内存为32GB DDR5 6400MHz,硬盘则是长江存储的PC41Q。单纯从硬件上看,iGame M15 Origo的性能非常强劲
智越山海!东风猛士M817搭载全栈华为,开启豪华电动智野新赛道 - 天天要闻

智越山海!东风猛士M817搭载全栈华为,开启豪华电动智野新赛道

近日,东风汽车集团有限公司与华为技术有限公司在武汉正式签署全面深化战略合作协议,双方将充分发挥在产业资源与技术领域的互补优势,围绕汽车智能化、企业数字化和智能化升级、生态共建等领域开展全方位深度合作。同时,双方还将协同东风汽车旗下东风岚图、东风猛士等品牌,共同