未来智能座舱发展什么样子？2023年12月13日，在2023第五届智能座舱与用户体验大会上，小鹏汽车嵌入式座舱系统高级专家朱永刚理解为两点:一是带来的体验，它的想象空间或者座舱天花板原超消费电子。二是通过万物互联，能打通所有的终端，和第一生活空间的基础场景还有第二空间的工作场景发生紧密的联系。
展望未来，朱永刚表示，在端到端的自动驾驶大模型上，通过大模型加速L3，L4自动驾驶时代的到来。智能空间讲的是通过多模的交互，视频，音频，语音，传感器融合技术的不断演进，把用户的体验又提升到新的档次。通过生态融合，万物互联打通终端，让以后的体验更加的丰富。
小鹏汽车嵌入式座舱系统高级专家
以下为演讲内容整理:
智能座舱发展历程
汽车的智能化是欣欣向荣的，汽车产品需求已经被智能化重新定义，我们经常看到好多和智能化相关的字眼，比如智能控制、智能互联、智能生活，汽车智能化成为购车的必要条件。回到智能座舱，我把智能座舱分成了4个阶段，1.0，2.0，3.0，4.0，不同的阶段有不同的使命。1.0很简单，是简单的工具，单一的功能。2.0的时候在上面增加了新的功能，像手机的投屏和导航，1.0和2.0是简单的工具，到了3.0，主要的特点是支持高阶的自动驾驶，像高速NOA渗透率比较高，城市NOA在逐渐铺开。
交互阶段语音助手已经成为标配，在这个阶段我的理解是已经进入帮助人的阶段。到下一个阶段是智能座舱4.0，进入新的阶段，主要是理解人，根据人的驾乘喜好做出反应。小鹏汽车的智能化事件，从第一款车G3上市到最近发布的X9，到现在小鹏已经有6款车，每一款的出现相对前一代有很大的迭代。最新发布的X9座舱亮点是8295处理芯片，有天机XOS支持很多功能，6音区的全场景智能语音和4K大屏。全场景智能语音是小鹏的亮点功能，X9支持的是6音区的全场景智能影音，乘客在6个不同的位置同时对小P进行操作可以做到互不干扰，同时反应速度非常快，入网的场景下小P也能做出非常快的反应。
图源:小鹏汽车
智能座舱发展的趋势
智能座舱发展到今天已经不是独立的系统了，尤其从舱驾融合的角度看，座舱体验得到颠覆式的发展，真正走向智能的移动空间，离不开高阶自动驾驶的加持，把人解放出来是第一步。舱驾系统的融合已经成为必然的趋势，但是智能座舱智能化的核心来自于有一个智慧的大脑，算力要足够强，处理能力足够强，算力和处理来自于舱驾系统，但是有些功能本地的端侧算力处理能力已经不能满足需求，同时要融合云端的算力和处理能力。整体上我们定义座舱系统的基础架构是舱驾云三位一体的架构，中间也有智能网联的发展。
图源:小鹏汽车
这张图的左边我主要画了人机交互相关的部分，像显示、音响、语音和传感器。右边是外延的生态配件部分，比如手机、游戏机和外部互联。下面是区域控制器，主要讲的是对整车的控制，比如对座椅、空调、氛围灯、香氛的控制。通过这些部件的紧密协作，最后能带给我们的是什么？未来智能座舱发展什么样子？我们理解两点:一是带来的体验，它的想象空间或者座舱天花板远超消费电子。二是通过万物互联，能打通所有的终端，和第一生活空间的基础场景、第二空间的工作场景发生紧密的联系。
智能座舱未来的方向是走向智能化、情感化和主动化，我们交互的机器不是冷冰冰的机器，逐渐地有感情，能理解我们，根据我们的喜好做出反应，成为我们的朋友。回到智能座舱趋势，主要是系统框架里部件的发展趋势。首先看视觉显示，相当于座舱的眼睛一样，视觉显示方案是多元的，我列了4个主要的技术，实际上现在看视觉技术远远不止这4个，它们经历了很长时间的演进，逐渐得到了用户的认可，在车上实现了不同程度的搭载。
一是HUD。它的发展非常快，两年前还是以大HUD为主，现在在研的车型里面好多搭载了AR HUD，未来有可能取代现在的仪表，有可能改变现在汽车内造型的走向。HUD有一些问题存在，比如布置和空间上的位置，但是逐渐走向更高的空间更小的尺寸更高的分辨率，后面会出现更多交互和更多生态的拓展，未来我们开车的时候可以通过HUD出现一些虚拟的广告牌和实景的结合，推出驾驶员喜欢的场景。
二是OLED，miniLED，这不是新的技术，好多车上已经有搭载。消费电子已经有很高的渗透率，像手机，平板，电视搭载率比较高，车里面因为车规的要求，成本还比较高。基于HDR高分辨率和高色域，结合HDR内容源越来越丰富，我们认为未来搭载率越来越高。三是CMS电子的后视镜，在国外前几年已经上车，2023年7月份法规落地，国内也有一些车型逐渐搭载上路。我们从车厂看还是有一些问题，成本方面大家愿意不愿意花成本替代传统的后视镜，布置空间上找到更加符合驾驶习惯的位置也是痛点。从CMS的展示或者体现上看，对于低光照场景下解决用户痛点还是个难题，随着更多车辆的搭载以及产业上的推进，CMS可能会改变整车形态，把传统后视镜变成两个耳朵。
XR眼睛可以提供大的投影、观影的体验和游戏体验，同时结合车里极致的音响能带来沉浸式的体验，未来能打造差异性的需求。音响系统最直接的感受是非常卷，之前在油车里高阶动辄一二十个扬声器，之前高功率的系统更多出现在高端的车里，而目前很多车里都是这样的配置。为什么能达到这样的效果？主要是几点。
电动车里电池的容量较高，支持更高功率的音响不是大问题。布置上比之前的油车更加方便，更加灵活。更深层次的原因还是用户的智能化需求被抬高，大家在音响方面也在追求极致的体验，通过满足用户的需求打造。其次，音响的产业也在发生大的变革，高端的音响通过一家供应商提供包括扬声器、音效和调音的部分，成本很高，现在产业进行了细分。
AI大模型主要不仅仅在座舱这块，在自驾方面起了很大的作用，对于高阶的自动驾驶来讲需要更加的智能化和人性化，相对于传统的模型，目前看端到端的自动驾驶模型提供的性能更强，是许多自动驾驶走在前端车厂正在探讨的方向。大语言模型有机会把之前指令识别性的被动式交互推向新的主动式情感式交互。大语言模型不仅在车上大家想怎么去落地，同时在互联网、手机、消费电子等行业里大家也在积极推动。
传感器融合方面，传感器在车上很多，高阶自动驾驶动辄十几个摄像头，车内也有很多的摄像头、OMS、DMS和传感器。下面更主要的方向是怎么把传感器融合，未来有很多想象空间。SOA通过开放统一的标准接口，可以开放给软件的开发者开发，通过比较友好的界面开放给普通用户，他们可以调用其中某一个功能或者一些功能的组合来生成更加有个性化的场景，同时分享给其他的车主。SOA可以扩大汽车的想象空间，满足后续的差异化。
自动驾驶和网联技术主要是为智能座舱下一代做颠覆式发展提供了基础和强大的驱动力。L3，L4自动驾驶有可能比我们想象来的更早，2023年11月4部委发布了高阶自动驾驶落地的通知，自动驾驶大规模的商业化落地会推动智能座舱得到颠覆式的发展。我们现在观察到在中高端的车型里5G搭载率非常高，随着后边3GBP，18，19，20的发布，5.5G的技术又到来了。相信有更多的产品推出比现在支持带宽更大，延迟更小，有助于端侧和云侧算力的融合和分配。通过端侧云侧更好的算力结合，能够把智能座舱性能体验拉伸到新的天花板。
未来展望
一是舱驾控制器，我们主要做控制器前瞻技术的研究。舱驾融合已经成为必然的趋势，很多车厂在做融合，我这边也画了三个阶段，最开始是独立的控制器，走向了板极的融合，后面走向了芯片级的融合。在中低端的座舱里面芯片级的融合会更早的到来。对于高端的系统还会稍微慢一点，对算力的需求比中低端要求更高。在和芯片供应商的沟通当中，下一代里没有哪一家考虑单独的座舱或者单独的设计，大家都在考虑融合。
图源:小鹏汽车
为什么做舱驾融合？主要是几个方面:一是通过舱驾融合系统的性能上得到进一步提升。以前通过板间通讯的接口，现在通过芯片内部的总线，它的带宽远远提高了，控制器之间的交互更加容易灵活，延迟更低，通过性能的提升能带来体验上进一步的提升。二是从降本的角度。通过芯片级的融合，由于座舱和自驾芯片是同构的，达到芯片融合之后资源的分配可以更加灵活，资源的利用率比之前更高，芯片外部一些接口也能够得到共享。
舱驾融合也存在很多的挑战。跨部门的协作更多了，系统更复杂了，我们能够在跨部门的协作过程中快速达成共识协作共创，是比较大的挑战。产品的迭代周期缩短了，控制器的复杂度提高了，以前考虑一个系统是两年的时间，现在到1.5年甚至更短，在这么复杂的系统里仍然保持产品的质量也是一个挑战。
把前面讲的几个重点进行回顾，主要从不同的维度。数据驱动随着AI的发展，有望改变汽车行业的软件形式，包括大语言模型把我们的交互方式从之前的被动式交互推向主动式的交互，在端到端的自动驾驶大模型上，通过大模型加速L3，L4自动驾驶时代的到来。智能空间讲的是通过多模的交互，视频、音频、语音和传感器融合技术的不断演进，把用户的体验又提升到新的档次。通过生态融合，万物互联打通终端，让以后的体验更加的丰富。
云端一体是目前网联系统的发展、算力的部署不仅仅在端侧，在云侧网联技术的带宽越来越大，算力的部署越来越灵活，通过共享云端的算力，把控制器的性能提升新的档次。SOA通过标准化的接口开放给软件开发工作者，可以把以前的移动生态带到车里，对车厂后续有盈利的机会，也能满足更多用户个性化的需求。
