平稳智驱是一家以科技改动为导向,具备整车平台研发才气,并面向行业生态全面绽放分享的科技公司。
现时,智能座舱存在设想同质化、功能同质化等问题,导致座舱的各异化不及,识别度缩短。2024 年 11 月 7 日,在第六届智能座舱与用户体验大会上,平稳智驱扩充总监秦艺指出,畴昔的智能座舱体验将呈现出三大发展趋势:一是舱驾和会带来的多维互动化,二是造谣现实本事和会的千里浸式体验,三是智能末端成为 AI-Agent。
基于这些瞻念察,平稳智驱推出了 AI 智能座舱,该座舱集成了三大行业创举实践。最初,它接纳了全 3D 多形态桌面互动系统,为用户提供新颖的操作界面和交互体验。其次,引入开辟全国的游戏制作理念,打造千里浸养成式造谣全国,打造了一个高度模拟现实的造谣环境,增强了用户的千里浸感。临了,结合了 AI 模子与出行垂直鸿沟生态,依托出行生态平台,打造座舱一站式 AI 出行助理,为用户提供了愈加智能化、个性化的出行办事。
秦艺 | 平稳智驱智能网联扩充总监
以下为演讲内容整理:
对于均瑶集团与平稳智驱
均瑶集团所以实业投资为主的当代处业绩企业,创立于 1991 年 7 月,现已酿成航空运载、金融办事、当代破钞、教育办事、科技改动五伟业务板块,旗下有 4 家 A 股上市公司,职工超 2 万东说念主,是中国处业绩 500 强企业。
新动力汽车科技业务是均瑶集团的第六伟业务板块,平稳智驱手脚这个板块的承载主体,是均瑶集团全资子公司。平稳智驱是一家以科技改动为导向,具备整车平台研发才气,并面向行业生态全面绽放分享的新动力汽车科技公司,包括三电系统、智能网联、自动驾驶、平台架构、性能集成、整车工程等中枢研发才气。
面前,平稳智驱已完成自主研发的高性能、高安全、高智能的可进化模块化纯电专属平台,大带宽,可迭代,隐敝 A~C 级车型,可顺应 Sedan、SUV、MPV 等多品类车型。基于该平台的全新车型(Juneyao Air)行将 SOP 量产录用,将于 2024 年第四季度最初面向国际市集上市录用。
打造各异化智能座舱的念念考
现时智能座舱体验存在三个近况,分辨是本事决策趋同、东说念主机交互趋同、AI 体验瓶颈。同质化使得座舱的各异化不及和品牌识别度不够。但履行上,同质化并非不好,同质化的底层原因是交互视觉的普世合感性、用户需求的长入导向。如若过度强调各异化,可能也不太好。因此在塑造各异化的同期,弗成抵牾用户使用风俗和需求。
咱们觉得,畴昔智能座舱体验存在三个趋势。一是舱驾和会后的多维互动化。舱驾和会趋势下,智能援救驾驶将进一步晋升车内乘员的解放度,座舱互动不再局限于视听文娱和互联应用,互动体验需求会大幅高潮,用户对于座舱的互动感,需要有千里浸式的载体。
二是造谣现实搀杂的千里浸化。从二维 HMI 交互,到多屏互动交互,到语音 +GUI 的搀杂交互,再到多感多模态的和会交互,最终用户需求高潮为基于车内物理全国+车外环境全国+座舱造谣全国的搀杂千里浸式交互。
图源:演讲嘉宾素材
三是智能末端成为 AI-Agent。Al 大模子赋能智能座舱、智能语音交互、多模态交互、视觉感知、车云一体,都将使得智能汽车手脚末端,迟缓渐进式 AI 化,访佛智高手机的发展道路,从腹地计议 + 云计议的多应用形态,演化为 Al-agent。
基于以上念念考,咱们在打造 AIR 智能座舱的经由中,坚抓用户原则,斗胆改动实践,进行了三个行业创举。一是行业首个全 3D 多形态桌面互动系统。桌面系统设想从 2D 化全面升级为 3D 化,况且不局限于车辆场景,确实齐备 3D 为底的桌面系统。咱们基于双 3D 引擎打造的神情和文娱系统,从用途需求启航,推崇引擎上风。履行上,3D 自身不是目标,3D 是器具和载体,呈现互动内容才是中枢。
二是行业首个千里浸养成式造谣全国。咱们引入绽放全国的游戏化制作,与车辆驾驶步履、用户步履的和会式养成互动,塑造情感价值。3D 造谣全国大致提供个性化视觉价值。此外,还齐备了游戏元素与运营行径相结合的用户成长与步履千里淀。
三是行业首个大模子 + 垂域生态的 AI 出行助理。最初,AI 大模子提供交互本事基础;其次生态接口提供信息团员才气;第三,汽车座舱成为大出行场景节点,为用户提供一站式精选式出行办事。
全 3D 互动座舱及千里浸式造谣全国的研发实践
下图是 Crystal OS Design,合座质感优良。不同与曩昔 2D 为底层逻辑的设想,平稳 AIR 的 Crystal OS 所以 3D 为中枢作念设想,合座设想基因的启动完全不同。
Air 系列车型的智能座舱包括六大中枢模块,这些模块相较于市面上的座舱齐备了各异化。一是硬件主流,域控架构,智能旋转屏;二是双 3D 引擎打造千里浸式交互系统 Crystal OS;三是 AI 出行助理,一站式智能大出行办事;四是航空特色的智能语音助手;五是丰富的互联生态,买通手机域和会桌面;六是行业创举养成式造谣全国 - 平稳全国。
咱们基于 Unity 3D 引擎打造了全 3D 多形态桌面互动系统,充分推崇了双引擎的各自上风,大致凭据应用场景的脾气进行迂回。咱们在车控场景中使用基于 Unity 原生的全局 GI 光照模式,并重构了天外球的 24 小时渲染口头。其中,好意思术、模子、场景、地编、TA 技好意思、情状等都是由咱们全部自研的。车辆的造谣截止需要充分探求用户履行需求,因此咱们在高通 8155 平台上(性能不是最强的情况下),克服了好多本事长途,趟了不少坑,不仅探求功能的褂讪性、视觉服从,也要探求功能褂讪性和性能服从。
经过一系列本事改动,咱们齐备了在 8155 平台上构建悉数这个词全产物造谣全国,也十足完成了性能畅通、画面视觉多者之间的均衡。此外,咱们实践了一些 3D 的 HMI 和安卓系统以及造谣化系统之间的通信机制、层级,包括数据安全、反映。
面前,咱们所研发的行业首个千里浸互动式造谣全国——平稳全国已率先在国际推出,泰国市集对咱们新颖改动的智能座舱酷爱浓厚,引起了考究的各异化反响,国内版块也照旧完成量产,行将上市。在这个造谣全国里,咱们在座舱内提供了类游戏化的体验。咱们在作念平稳全国时引入了游戏行业打造绽放全国的理念,基于主角互动和场景探索,大致在车机上齐备好多玩法。
咱们哄骗 AI 大模子器具赋能平稳全国的好意思术设想,咱们设想有多个地块,互动元素丰富,全场景稀有干万级面数。造谣全国与物理全国的一些元素产生了联动,包括骨气和天气等,每一时的车机中的视觉,都是簇新的。
基于造谣全国的互动座舱不单是有用户价值,还有好多车厂价值。对用户而言,造谣全国提供了从底层逻辑上来说完全不一样的交互,是全 3D 的千里浸式交互。它最初是视觉价值,包括个性化全国的装束,酿成了用户在视觉上的各异,也有陪同化的情感价值。
而对于车厂而言,车厂要与用户产生灵验的贯穿,通过平稳全国在其中引入更多运营手法,让用户抓续在每天的通勤驾车经由中与造谣全国产生千里淀,进而产生更多互动。其实造谣全国还有一些很深头绪的价值待挖掘。
AI 大模子出行助理的改动研发实践
现时,行业内 AI 大模子应用于座舱中的主流场景包括智能车书、常识 / 百科 / 资讯、语义兜底、文生图 / 图生文、出行资讯 / 腹地生存、个性化造谣东说念主。但有一些不是座舱里的高频应用,或者新鲜感之后就不会再用了。
咱们将 AI 与出行相结合,背后逻辑最初是咱们我方车型的定位,包括公司定位,提供跨场景的多场景出行处理决策。车是处理从 A 点到 B 点出动的一个器具,在这个经由中,能否把 AI 应用起来,并与用户的出动端步履产生互联?比如出差场景或旅游场景,需要买机票、打车、订货仓等,面前完成这些动作,咱们需要在手机的不同 APP 上进行。如若用户在开车经由中大致一站式处理这些问题,那就很是有价值了。
大模子作念出行不单是 AI 自身的才气,还包括构建绽放定约、末端应用和大出行中台,这是提供 AI 才气到应用,再到产物场景上的基础。咱们设置了这么一个架构,最中枢的是大出交运营平台,依托均瑶集团和字节体系的皆集生态,莫得生态,大模子是无法提供内容的。在这个架构中,咱们主要聚焦在座舱端、车端应用的打造,生态的团员。字节逾越为咱们提供了大模子自身的计议引擎才气,包括字节的抖音腹地生存等一些生态的迂回。
从场景上而言,其打算包括出行、腹地生存。比如在差旅场景中,用户对车机说出"帮我定一下去深圳出差的三天行程",用户只需一句话领导,咱们通过 AI 大模子将用户的语义进行阐述,对接到相应的手段,给出一站式处理决策。咱们不错通过车机平直展示出行道路、允洽的货仓、热点景点短视频等,用户也不错保存分享胜仗机端。
面前的大模子应用中,咱们去问一些车去某地玩的出行打算,大部分都是给出一大段文本,第一台如何样,第二天如何样,作念不到咱们这种,是因为咱们与生态进行了深度联通,将模子手脚计议引擎,生态手脚资源池,为用户提供一站式的处理决策。
基于隔邻搜索亦然相同,在惯例的车机中,咱们有计划隔邻资源,一般是跳转舆图给出 POI 保举,或大模子给出大段文本。而在平稳的车型中,咱们通过大模子引擎和大出交运营平台,将生态进行和会保举,不错一键导航,酿成一站式处理决策。
用户除了在车端,也不错在手机端齐备相干功能。这些产物面前在国内照旧完成了相干的量产设想,咱们也行将在国际市集推出。咱们在泰国自研的车云平台、车联网功能也照旧量产,国际版 JuneyaoAuto APP 也行将上线。咱们畴昔的打算是,唯一是平稳航空到达的航路,咱们都但愿大致在当地齐备端云一体的 AI 出行助理的处理决策。
咱们但愿将平稳智驱以上智能座舱、车云平台、国际车联网平台等悉数处理决策面向行业,对车厂、tier 1 等进行绽放,开源衔尾,协同改动,沿路为用户提供面向畴昔趋势的全 3D 千里浸式造谣全国的智能座舱。
(以上内容来自平稳智驱智能网联扩充总监秦艺于 2024 年 11 月 6 日 -7 日在第六届智能座舱与用户体验大会发表的《全新 3D 互动体验座舱及 AI 大模子应用的改动与实践》主题演讲。)