明年,蔚来将迎来技术大年!老车主不会寒心

AI划重点 · 全文约5557字,阅读需16分钟

1.蔚来在2023年首届NIO IN上提出了智能电动汽车12项全栈技术布局,AI成为贯穿蔚来技术全栈的核心能力。

2.今年,蔚来深化了AI技术在整车上的应用和落地,发布全球首颗5nm智驾芯片神玑NX9031和整车全域操作系统SkyOS·天枢。

3.除此之外,蔚来发布了中国首个智能驾驶世界模型NWM,以及基于AI核心底层能力打造的全新一代智能系统Banyan 3。

4.蔚来全新NIO Phone正式上市,搭载纯净的SkyUI,坚持“零系统广告”与“零商业预装”,提供更大的存储空间和更安全的体验。

以上内容由腾讯混元大模型生成,仅供参考

图片


/// 蔚来AI化。


作者:鹿白

编辑:肖莹


全球首颗5nm智驾芯片成功流片、自研整车操作系统SkyOS正式全量发布、Banyan 3 AI能力升级、智能驾驶世界模型NWM发布,全新NIO Phone正式上市……


7月27日,以AI为主线的 “NIO IN 2024蔚来创新科技日” 在上海世博中心成功举行。本届NIO IN,蔚来着重展示了面向AI的多项研发成果,可以说AI成为了整场发布会的核心主角。


近一年来,在AI技术突飞猛进的背景下,智能电动汽车也开始受益于 AI 的发展,众多车企纷纷开始布局AI技术。


在2023年首届 NIO IN上,蔚来就提出了智能电动汽车12项全栈技术布局,而AI成为贯穿蔚来技术全栈的核心能力。今年,蔚来则再次深化了AI技术在整车上的应用和落地。


蔚来创始人、董事长、CEO 李斌表示:“基于时间模型的端到端,会在今年四季度会让大家体验;Banyan 3.0会在今年三季度上车;智能芯片要在明年一季度才能发挥(作用)。”


可以预见,明年,将是蔚来汽车技术能力深度释放的关键一年。



01

整车智能化底座:全域操作系统「SkyOS · 天枢」



当前,汽车的智能化大多依靠在原有架构上增加模块的手段实现。在大模型、大算力的AI时代,这种“做加法”的方式,已经无法满足新时代智能汽车的开发与持续进化的需求。

因此,随着大算力芯片逐步成熟、汽车电子电气架构向中央集中式演进、AI大模型上车,负责连接硬件与软件的操作系统,也必须要从传统以供应商主导的分布式架构,向车企主导的集中式架构转变,成为真正意义上的“整车全域操作系统”。

整车全域操作系统是实现汽车软硬件分层解耦、应用算法跨域共用的关键,是汽车智能化发展的关键基础底座,也是下一代智能汽车最重要的核心竞争力之一。

在NIO IN上,李斌正式全量发布整车全域操作系统SkyOS·天枢,这是蔚来历时4年研发、投入超过23000人、面向AI时代打造的汽车智能底座。


汽车行业进入AI时代,智能电动车进化为AI智能体,需要具备整体的感知、思考和控制执行能力。SkyOS·天枢作为面向 AI 的整车全域操作系统,就是智能电动车的“灵魂”。

SkyOS·天枢具备高带宽、低时延、大算力与异构硬件、跨域融合、灵活持续进化、高可靠性、信息安全七大特性。

在底层打通智能硬件、计算平台、通信与能源系统,实现对车联、车控、智能驾驶、数字座舱、手机应用等全域应用的统一管理与协调,在AI时代构建真正的整车全域智能。


具体来看,SkyOS·天枢以“1+4+N”的技术架构,实现这七大特性。

“1”是指多场景优化、高性能、高可靠的虚拟机监视器SkyOS-H,用来管理和调度整车的异构大算力资源,为各个系统提供安全隔离的运行环境。相比行业通用方案,SkyOS-H 实时任务时延缩短50%,多线程吞吐量提升40%,虚拟磁盘吞吐提升15%。

“4”是指SkyOS的4个操作系统内核:

  • 轻量、强可靠性、强实时性的SkyOS-L,支持所有主流车载MCU芯片架构。相比行业通用方案,SkyOS-L 实时周期性信号准时送达率提升30-40%;

  • 基于微内核构建高安全、强可靠性、强实时性的SkyOS-M,用于中央大脑,主要运行车控相关功能,包括车身、底盘悬架等的高阶控制逻辑。SkyOS-M 的核心优势是安全隔离,在受到同样影响的情况下,SkyOS-M 的自恢复速度比Linux系统快100倍;

  • 面向丰富应用场景高性能、实时性深度优化的SkyOS-R,部署智能驾驶域的大部分功能。和 Linux 发行版相比,SkyOS-R在轻负载情况下实时性能高113倍,在高负载情况下实时性能高20倍,端到端通信延时小于1ms,为智驾提供更高的实时性性能保障;

  • 面向原生智能深度定制的SkyOS-C,承载绝大多数的智能座舱功能,实现低延时的车云一体化,充分利用云端更大的算力资源与模型,提供更加智能的座舱AI体验。

“N”则是指 SkyOS-中间件,是实现分层解耦、跨域融合的关键,也是支持全生命周期升级和信息安全保障的基础。

SkyOS利用自研SOA框架,将整车抽象出1600多个原子能力,以服务于API的方式给各域不同的应用来调用。

自定义的高性能跨域通信协议栈TOX,高优信号容量比传统CAN总线提升30-50倍,与传统车载通信协议相比端到端延时降低 40%,极限0丢包阈值提升109%。


此外,AI时代,数据闭环是智能汽车实现数据驱动、全生命周期迭代的核心机制。SkyOS·天枢整车全域操作系统根据不同类型的数据源与数据使用方式,配置不同的数据采触发机制,实现精准、高效的数据采集和灵活、系统的数据配置管理。

作为中国车企首次掌握的全球领先的整车全域操作系统,SkyOS·天枢实现了行业突破,“地基”打好,也意味着蔚来后续的产品开发与迭代升级会越来越快,相比单点智能,全域融合的整车智能会创造出更多人无我有的领先智能化体验。


02

智能驾驶:芯片+世界模型两手抓



如果说SkyOS·天枢构建了整车智能化的底座,而在底座之上,智能驾驶和智能座舱则成为决定用户驾驶体验效果好坏的关键。

其中,在智能驾驶领域,在NIO IN 2024蔚来创新科技日,李斌宣布全球首颗5nm智能驾驶芯片——神玑NX9031流片成功。


去年9月的首届NIO IN上,蔚来正式发布神玑NX9031 ,仅过去10个月时间已经成功流片,而该芯片也即将于明年量产上车。

作为业界首款采用5nm车规工艺制造的高阶智能驾驶芯片,蔚来“神玑 NX9031”芯片和底层软件均已实现自主设计。

神玑NX9031拥有超过500亿颗晶体管,不论是综合能力还是执行效率,一颗自研芯片能实现四颗业界旗舰芯片的性能。

「不是一般的领先。」李斌在现场说道。

李斌在现场重点展示了神玑NX9031的ISP能力,同样800万像素,不同的ISP成像效果是完全不同的,在日常行驶的道路上,基于神玑NX9031芯片的800万像素摄像头就能看到更远的地方。

不过,李斌对这颗芯片的部分参数并未进行公布,比如NPU算力能力等。

在智能驾驶上,除硬件芯片外,蔚来还发布了中国首个智能驾驶世界模型NWM(NIO World Model,蔚来世界模型)。


NWM,是一个多元自回归生成式的具身驾驶模型,可全量理解数据、具有长时序推演和决策能力,能在100毫秒内推演出216种可能发生的场景,寻找到最优决策。

作为生成式模型,NWM可将3秒钟的驾驶视频作为Prompt(提示词),生成长达120秒的视频。NWM还具备与生俱来的闭环仿真测试能力,已在复杂交互场景中全面测试并验证性能。

蔚来方面也表示,驾驶场景上NWM生成的能力比Sora更强。

NWM还具备与生俱来的闭环仿真测试能力。在一系列极具挑战性的道路环境中,全面测试并验证了其卓越的性能表现,涵盖了施工区域、恶劣天气条件以及交通参与者之间的复杂交互场景。

此外,蔚来智能驾驶技术架构NADArch2.0也正式在NIO IN 2024蔚来创新科技日上发布。


NADArch2.0 在算法层升级为引入世界模型的端到端架构,直接从原始传感器数据生成驾驶决策,减少传统方案中的信息损耗。预测能力更强,让智能驾驶体验更安全、更拟人。

而在模型训练层面,NADArch2.0架构还可充分利用群体智能的数据闭环和生成式仿真数据,通过海量数据驱动智驾模型进行快速迭代。借助群体智能,蔚来实现一天一百万公里动态验证,半年一亿公里验证动态验证,一周一个验证版本,一个月一个量产版本。

在此前的Banyan2.6.5版本里,蔚来已在主动安全上使用端到端架构的AEB,上车后,事故避免率优化:NADArch2.0中的端到端AEB算法,大幅提升了对于风险场景的覆盖能力,可应对原本无法响应的场景,提升响应覆盖6.73倍,守卫用户的驾驶安全。

据悉,基于 NADArch2.0 架构,全域领航辅助NOP+和智能安全同步升级为2.0版本。NOP+2.0将于2024年下半年上车,智能安全2.0已逐步交付,增强版AEB于Banyan 2.6.5上车。


03

Banyan 3,首个基于AI底层能力打造的智能系统



AI+汽车,率先落地的一个应用场景,就是智能座舱,而如何让智能座舱更具有情感化和人情味,则是众多车企在智能座舱领域研发的一个重点方向。

此次蔚来全新Banyan 3智能系统,是基于AI核心底层能力打造的全新一代智能系统,充分发挥超前的硬件配置所带来的算力基础,将最新的AI算法与智能硬件、原生智能框架和智舱应用深度融合。


Banyan 3 最大的特点是从底层运用AI技术赋能智能系统,在情感智能、智舱应用和智能底盘方面,带来更具成长性和个性化的用户体验。

Banyan 3的情感智能,是基于AI大模型能力和原生智能系统,打造了全新的NOMI GPT架构。

NOMI GPT定义了面向大模型的车载AI交互范式,NOMI灵动视窗配合高自然的交互、绘声绘色的表情,交互体验更加拟人,重构NOMI的认知和复杂任务处理能力。

蔚来还引入NOMI Agents多智能体架构,让智能座舱体验全面Agents化,NOMI停车助手、守卫、服务管家、探索发现、DJ 、旅行回忆,六大Agents多智能体会在Banyan 3和之后版本陆续推送。

基于NOMI Agents智能体框架, 将加速蔚来智能座舱从「单点功能」向「主动智能」进化。后续,蔚来智能座舱的核心体验将全面Agents化。

另外,蔚来全球首创NOMI情感引擎,在NOMI GPT认知中枢模型和多智能体架构的支撑下,情感引擎带来了情境智能、专属智能和情感表达三个基石能力。


情境智能:NOMI GPT基于自研情境智能算法和技术架构,可感知包括人、车、环境、服务等上千种原子信息, 通过情境计算以及融合仲裁,输出语义化情境描述,让NOMI行动和表现恰如其分。

专属智能:蔚来全栈自研专属智能算法和架构,把用户与NOMI的互动进行筛选、推理、计算和沉淀,转化为千人千面的专属记忆。使用强化学习方式,对人设进行向社会、企业、和用户的多层价值观对齐;制定了严格的数据规范,也支持擦除隐私和无痕模式,仅沉淀和使用必要的内容。同时,用户的个人信息仅在本地本人账户下存储,数据不出车,全面保护隐私安全可控。

情感表达:全栈自研的情感表达模块,可以根据情境智能和专属智能的输入,NOMI组合出恰如其分的多模态表达,实现响应速度与表达效果之间的最佳平衡。

NOMI情感引擎让NOMI成为更有温度、更专属于你的情感伙伴,为用户带来全场景、全生命周期的情感体验。

与此同时,蔚来SkyOS-C数字座舱全栈架构及多个AI模型上车,催生出全新AI原生应用及个性化的服务和生态。蔚来数字座舱实现了和自身服务能力的打通,比如可以通过NOMI预定代驾、预约售后服务等,这将是行业独一无二的能力和体验。

AI音质算法加成的QQ音乐臻品音质 、支持AI实时生成调音方案的专家均衡器Pro EQ、自研算法带来三大AI体验升级的无麦K歌 2.0,以及 Flux-轻应用及车载小程序,打造出更多轻量化原生感应用体验,AI智舱应用让Banyan 3 智能系统在沉浸和个性体验上更进一步。

AI能力也是智能底盘创新的灵魂。蔚来AI智能底盘采用全栈自研的底盘架构,通过异构算力融合、跨域融合、实时数据共享的硬件基础,结合端云一体架构和群体智能,得以在Banyan 3智能系统上实现4D全域舒适领航以及后排尊享模式,为用户提供更高品质的全程舒适出行体验。

此外,值得一提的是,蔚来Banyan 3正式接入车载小程序,将用户日常手机上使用的小程序体验和服务全面接入车机,并且与车机融合获得更原生的体验。

小程序采用悬浮视窗打造与蔚来车机屏幕完美适配的原生服务和交互体验,系统级播控、通知和原子能力深度打通。

星巴克、麦当劳、微信读书等在内的高品质生活服务小程序都提供给Banyan用户,在后续的OTA中将支持更多原生AI能力与小程序打通。

全新Banyan 3智能系统预计将于8月下旬向用户推送首个版本。


04

零广告零预装的全新 NIO Phone上市



发布会的最后,蔚来的全栈技术生态布局的最后一环上场,其全新NIO Phone正式上市。

根据配置不同,售价分别为:性能版6499元、旗舰版6899元、EPedition 7499元。全新NIO Phone除在蔚来App发售以外,将首次在京东、抖音等外部渠道销售。

图片

而此次全新 NIO Phone 的重点在于,其搭载最纯净的 SkyUI,坚持“零系统广告”与“零商业预装”,彻底摒弃广告推流与竞价排名,从源头构建新秩序,建立纯净的生态,让手机回归该有的纯净体验。

SkyUI 轻装上阵,为用户提供更大的存储空间,保证系统在使用中更加轻快、流畅。纯净的设计理念,也让SkyUI成为当下体积最小的安卓OS系统。

全新NIO Phone在隐私保护、应用安全、数据安全和设备互联安全方面进行了全方位升级,能够让用户在不同设备、不同场景下获得全链路安全保障。

国密认证安全芯片、横幅通知内容隐藏(AON+ 人脸识别)、车牌智能打码等软硬件功能,能够牢牢守护用户隐私。

此外,伴随智能手机进入 AI 大模型时代,AI 也赋能全新 NIO Phone,大幅提升手机的智能体验。

全新NIO Phone搭载了 NOMI GPT,支持包括百科全书、生活常识、历史事件等60多个问答场景自由对话。此外,全新NIO Phone 还将提供通话录音智能摘要、文本摘要、相册大模型搜索、AI 消除笔等功能。

结合AI能力, 依托整车全域操作系统「SkyOS · 天枢」,全新 NIO Phone 以跨端融合打造出更智能的座舱体验。

图片

全新自定义车控键可直达常用功能。比如,长按车控键能快速启动系统或车控功能,并且支持根据手机离车的不同距离设置不同功能,甚至全新智能车控能自动识别车内外位置,一键直达常用车控功能。未来,此键可升级支持 60+ 项车控功能。

NIO Link 蔚来全景互联能实现超感车钥匙、超感泊车、智能寻车、增强版天空视窗、NIO Link接力等功能。NIO Link 随车播功能可以直接调用车辆摄像头,打造最快捷、方便的移动直播间,让 “车手互联” 更自由,操作更流畅。

在外观设计上,全新NIO Phone搭载等深四曲面天穹屏,技术上做到了业界最深的弯折深度——724μm。这种设计既保留了全新 NIO Phone 圆润的握持手感,又让画面观感更加纯粹。

作为一款高端旗舰手机,全新 NIO Phone 标配第三代骁龙8旗舰处理器,最高可选16GB+1T 内存与存储组合。

全新 NIO Phone 搭载的蔚来鲧禹散热系统,核心热源100%覆盖,开启王者荣耀游戏20分钟,维持119.9帧,温度40.5度;开启原神游戏30分钟,可保持59.8帧。

不管是整车智能化的底座SkyOS · 天枢,还是全球首颗5nm智能驾驶芯片神玑NX9031 ,亦或是智能驾驶的世界模型和AI情感化智能座舱系统Banyan 3,以及全新 NIO Phone ,这些产品背后能够看出蔚来坚持技术的长期主义,以及全面拥抱AI的技术策略。

李斌表示:“我们现在在跑马拉松,未来的路还很长,行业竞争也还非常长。如今技术变革如此之快、人工智能技术路线快速迭代的情况下,只能全力以赴,而不敢靠‘护城河’。”


Xauto报告

图片



欢迎扫码入群交流