职贝云数AI新零售门户

标题: # AI大模型如何赋能智能座舱 [打印本页]

作者: QrO8sdW4Wh 时间: 前天 15:37
标题: # AI大模型如何赋能智能座舱

(, 下载次数: 0)

AI大模型如何赋能智能座舱
从上海车展上，我们看到由于智能座舱配置性价比较高，曾经成为车企的核心竞争点之一，随着座舱硬件规模化卸车，蔚小理、岚图、极狐等新权利末尾注重座舱多模态交互，经过集成语音/手势/触控打造智能化差异体验。车展时期，百度、商汤、华为等拥有大模型的厂商相继推出智能座舱产品，我们以为 AI 大模型的落地，将加速赋能座舱语音助手向“AI 智能管家”晋级，有望推进座舱人机自动式交互时代的到来。
智能座舱演进到了什么阶段？——片面朝4.0多模态阶段迈入
我们将汽车座舱从机械时代到智能时代的发展划分为 5 个阶段，可以看到现阶段下座舱正处于从 3.0（以特斯拉 Model3/Y 的简配为代表）到 4.0（以理想 L9 的高配为代表）的演进阶段。该阶段重要特征即视听触多模块硬件加速晋级，丰富汽车座舱智能生态。我们参加了 2023 年上海国际车展，车展中我们看到造车新权利、传统车企、Tier1 等新产品的展出和发布。我们看到智能座舱配置的性价比推进其浸透率疾速提升，曾经由原先造车新权利“一骑绝尘”的方式，转换全行业“齐头并进”。搭载方案转向座舱视听触多模态硬件全方位晋级，印证了 4.0 时代加速到来，
大模型如何赋能座舱？——“AI管家”打造差异化体验
我们以为目前多模态交互的背后仍是经过“语音+触摸屏”来完成控制，靠乘客自动发起方能完成的指令辨认型“被动式交互”。大模型的落地，将加速软件才能晋级，推进座舱 5.0 人机自动式交互时代的到来。
大模型有望：
（1）经过赋能语音助手对于乘客的语音语义了解才能。打通其在视觉、听觉、触觉等多模态运用上的操控力，构成深度的乘驾人机自动式互动体验。
（2）摆脱座舱硬件堆栈同质化。经过大模型赋能语音助手或将成为“AI 智能管家”，因算法不同而具有不同的特征和功能，进而构成车企本身独特的智能化差异，构筑核心竞争力。
比较看好的产品方向：
（1）视觉：传统车载 TFT-LCD 显示技术的疾速迭代，逐渐趋向大屏、高清化。此外 HUD 结合 AR 技术兴起，法规允许 E-Mirror 上车，多态显示技术交互。我们测算 23-30E 全球车载显示硬件规模有望达 1723 亿元，CAGR 为 10.2%。
（2）听觉：经过搭载更多数量/不同区位扬声器完成环绕体验，添加数字功放/低音炮等器件提升听觉质感。我们测算 23-30E 全球座舱声学硬件规模有望达到约 483 亿元，CAGR 为 14.2%。
（3）触觉：3DTOF 作为最合适 AI 视觉的传感器，用于支持手势交互/DMS/乘客辨认功能，目前曾经在理想、问界、BBA 等率先上车，大模型发展有望驱动需求疾速提升.
智能座舱：4.0至5.0，从多模态到大模型
假如我们将汽车座舱从机械时代到智能时代的发展划分为 5 个阶段，我们以为现阶段下座舱正处于从 3.0（以特斯拉 Model3/Y 的简配为代表）到 4.0（以理想 L9 的高配为代表）的片面演进阶段。该阶段重要特征即视听触多模块硬件加速晋级，丰富汽车座舱智能生态。
（1）座舱 1.0-2.0：最末尾座舱的 1.0 时代，仅无机械仪表盘和车载收音机等寥寥数个车载元件，座舱次要以功能性为主。行至座舱 2.0 时代（20 世纪 80 年代后），随着信息技术革命，中控屏应运而生，可以初步显示行车信息及完成舱内控制功能，同时电气式仪表盘广泛运用，为驾驶员提供更多辅助信息。车载 DVD 功能的出现开启了汽车座舱文娱化属性的重要一步。
（2）座舱 3.0-4.0：后随着汽车完成区域集成架构，高功能、高集成、高扩展性的座舱域控制器以末尾助推智能化加速。我们以为在座舱 3.0 时期（2010 年后），中控屏、液晶仪表盘、音响等基础视听硬件，以及车灯、座椅等均得到了全方位晋级；此外 Carplay 等运用上车也开启了车机互联的时代。随后国内造车新权利不断推进座舱往 4.0 时代发展（2020 年后），我们看到 HUD、副驾/后排屏、电子后视镜末尾陆续上车，杜比音效、AI语音及手势交互甚至 VR 眼镜等功能不断创新，疾速丰富座舱智能化体验。
（3）座舱 5.0：展望将来座舱 5.0 生态，在地方集成架构下，整车智能化程度将达到一个新的高度。我们以为随着大模型的赋能，AI 语音助手将加速转变为“AI 智能管家”，停止深度人机情感交互。此外，参考 2023 年 CES 大会上宝马 i Vision Dee 概念车的构思：全息投影、透分明示、车灯投影、电子墨水、裸眼 3D 等元素或进一步晋级。

(, 下载次数: 0)

2023 年上海国际车展看到造车新权利、传统车企等新产品的展出和发布。智能座舱的浸透曾经由原先造车新权利“一骑绝尘”的方式，转换全行业“齐头并进”，行业搭载方案转向座舱多模态晋级，印证了4.0 **时代加速到来。**详细而言包括：1）视觉：车载屏幕向大屏化、多屏化、高清化的方向发展，HUD 加速上车。2）听觉：扬声器、功放数量添加，努力于打造沉浸式听觉享用。造车新权利：蔚来发布第二代数字座舱，搭载于 EC7、ET7、新款 ES8；理想：L7 延续L9/L8 亮眼座舱配置，打造家庭座舱体验；极狐：20.3 英寸中控屏与副驾/仪表/HUD 多屏交互，装载哈曼卡顿音响；广汽埃安：Hyper GT14.6 寸 2.5k 中控屏+23 个 HIFI 扬声器完成 3D 环绕平面声场。
传统车企：宝马：X1 搭载第 8 代 BMW iDrive 操作系统，装备 10.7 寸悬浮式曲面屏及HUD，满足驾乘者的个性化需求；大众：新车型 ID.7 VIZZION 主打智能乘坐空间，内置15 英寸 2k 悬浮中控屏及 AR-HUD，装备哈曼卡顿音响。

(, 下载次数: 0)

4.0阶段是座舱往多模态演进的时期，硬件晋级>软件晋级。目前多模态硬件的堆栈背后仍是经过“语音+触摸屏”来完成控制，次要交互停留在“命令辨认”层面，靠乘客自动发起方能完成的“被动式交互”，各模态之间仍互为独立。
往后随着硬件逐渐上车，座舱交互性和操控便捷性的重要程度逐渐凸显。车企末尾探求舱内智能化交互，“语音助手”或成为核心交互载体。看到目前新权利在座舱交互上曾经有所打破。例如智能化抢先的小鹏语音助手小 P 可以支持多指令辨认、离线呼应。蔚来人车交互系统 NOMI 具有较强的学习功能和语音指令辨认功能，此外还能根据不同状况表现出相对应的情感，与车主停止简单对话。而理想的“理想同窗”异样属于可以由关键词触发,可以执行语音/手势/触控命令的初级智能 AI。
往后看大模型的落地，或将加速软件才能晋级，推进座舱 5.0 人机自动式交互时代的到来。大模型有望：（1）经过赋能语音助手对于乘客的语音语义了解才能，提升全功能操控力。打通其在视觉、听觉、触觉等多模态运用上的操控力，构成深度的乘驾人机自动式互动体验。（2）打造智能生态差异化，摆脱座舱同质化。经过大模型赋能语音助手或将成为“AI智能管家”，因算法不同而具有不同的特征和功能，进而构成车企本身独特的智能化差异。
商汤日日新大模型亮相车展，大模型接入座舱。4 月 18 日上海车展上，商汤亮相了其“日日新 Sensenova”大模型，并展现了其中白话语模型“磋商 SenseChat”以及“如影 SenseAvatar”等与座舱的结合，我们看到经过大模型可以赋予座舱多种生成式 AI 才能，提供包括心情感知、智能助手、基于情感的对话、创意内容生成、个性交互等一系列功能，运用场景也可以拓展到文娱、办公、购物、休息等。

2)信息查询强化：经过语音讯问乘客可以获得详细信息查询输入，此外还包括关于餐厅引荐、游览途径规划、给儿童创造读物的创意性输入。
3)图片自动生成：相似 Midjourney 可以为乘客自动生成各种各样的图片。
4)安全辨认：可以根据乘客能否登记分为嘉宾/主人，可以根据不同乘客的记录的偏好引荐其合适的内容产品。同时具有更好的 DMS（驾驶员监测）、OMS（乘客检测）、儿童滞留等功能体验。
5)API 接入：支持外接第三方运用，协助完成会议管理、购物、差旅等功能。

(, 下载次数: 0)

百度推出座舱产品车载 OS 和语音 SDK，文心一言于多家用户展开内测。百度 Apollo 在上海车展前夕举行汽车智能化发布会，发布了全新晋级的驾舱图产品矩阵，座舱方面百度发布车载 OS 和语音 SDK。其中，语音 SDK 基于大模型的本地化部署，具有全双工和毫秒级呼应的优点，可以为车企提供更先进而出色的智能座舱体验。百度 SDK 突出优势包括：（1）将一切座舱功能集成到语音助手，可以经过语音完成舱内全功能调理；
（2）支持“多路对话”，不同的乘客可以在同一工夫与语音助手展开交流并下达指令。目前包括集度、吉利、长城、红旗、岚图、东风启辰等主机厂曾经宣布接入基于文心大模型的生成式对话产品文心一言（ERNIE Bot），开启本身座舱大模型的内测。
华为积极规划座舱 AI，大模型于春季首发 M9 上落地。华为盘古大模型基于鲲鹏和昇腾算力底座，由 NLP（中白话语）大模型、CV（视觉）大模型、迷信计算大模型、多模态大模型和 Graph（图网络）大模型 5 个模型组成。4 月 17 日车展前夕，在华为 nova11 系列及全场景新品发布会上，余承东宣布 2023 年春季发布 AITO 问界 M9 将搭载 AI 大模型。
其语音助手“小艺”经过抢先的多模态自顺应技术，针对语速、语音、文本，对用户指令停止多维度综合判别，可以完成相似人与人的自动交流。目前“小艺”曾经可以：
（1）根据日常通勤的状况自动提供通勤道路异常的提示；（2）判别长途驾驶场景时，检测到车主有疲劳驾驶形态自动打开座椅按摩；车内午休/通勤回家后打开自动小憩形式，记录用户喜欢的氛围。（3）引荐顺该当前车辆状况的驾驶形式；（4）停车找位的好帮手。

(, 下载次数: 0)

据高工智能汽车研讨院，2022 年中搭载智能数字座舱（大屏+语音+车联网+OTA）前装标配交付 795.05 万辆，搭载率为 39.89%，仍有较高浸透空间。市场规模方面，根据 IHSMarkit 预测，全球智能座舱市场规模将从 2021 年的 420 亿美元增长到 2030 年的 681 亿美元，2022-2030 年 CAGR 为 5.52%。IHS 预测国内智能座舱市场增速抢先全球，国内规模从 2021 年 99 亿美元估计提升至 2030 年 247 亿美元，2022-2030 年 CAGR 为 10.69%，我国智能座舱规模全球占比将从 2021 年 24%左右上升到 2030 年的 36%。

(, 下载次数: 0)

现阶段下智能座舱曾经处于片面向 4.0 阶段发展的时期，曾经从新权利领军转换
为行业内齐跑。硬件的装载是完成软件层交互的基础，座舱硬件已率先迎来大规模上车机遇，首先看好视听触多模态硬件：显示、音响以及 AI 视觉硬件 TOF 模组等疾速卸车，车端业务有望高速增长。在智能座舱大模型生态发展下，拥有大模型和机器视觉技术规划的软件层企业异样有望受益。
如何学习大模型 AI ？

由于新岗位的消费效率，要优于被取代岗位的消费效率，所以实践上整个社会的消费效率是提升的。
但是详细到个人，只能说是：
“最先掌握AI的人，将会比较晚掌握AI的人有竞争优势”。
这句话，放在计算机、互联网、移动互联网的残局时期，都是一样的道理。
我在一线互联网企业工作十余年里，指点过不少同行后辈。协助很多人得到了学习和成长。
我看法到有很多阅历和知识值得分享给大家，也可以经过我们的才能和阅历解答大家在人工智能学习中的很多困惑，所以在工作繁忙的状况下还是坚持各种整理和分享。但苦于知识传播途径有限，很多互联网行业冤家无法获得正确的材料得到学习提升，故此将并将重要的AI大模型材料包括AI大模型入门学习思想导图、精品AI大模型学习书籍手册、视频教程、实战学习等录播视频收费分享出来。

(, 下载次数: 3)

第一阶段（10天）：初阶运用

该阶段让大家对大模型 AI有一个最前沿的看法，对大模型 AI 的了解超过 95% 的人，可以在相关讨论时发表高级、不跟风、又接地气的见解，别人只会和 AI 聊天，而你能调教 AI，并能用代码将大模型和业务衔接。

第二阶段（30天）：高阶运用

该阶段我们正式进入大模型 AI 进阶实战学习，学会构造公有知识库，扩展 AI 的才能。疾速开发一个残缺的基于 agent 对话机器人。掌握功能最强的大模型开发框架，抓住最新的技术停顿，合适 Python 和 JavaScript 程序员。

第三阶段（30天）：模型训练

恭喜你，假如学到这里，你基本可以找到一份大模型 AI相关的工作，本人也能训练 GPT 了！经过微调，训练本人的垂直大模型，能独立训练开源多模态大模型，掌握更多技术方案。
到此为止，大概2个月的工夫。你曾经成为了一名“AI小子”。那么你还想往下探求吗？

第四阶段（20天）：商业闭环

对全球大模型从功能、吞吐量、成本等方面有一定的认知，可以在云端和本地等多种环境下部署大模型，找到合适本人的项目/创业方向，做一名被 AI 武装的产品经理。

学习是一个过程，只需学习就会有应战。天道酬勤，你越努力，就会成为越优秀的本人。
假如你能在15天内完成一切的义务，那你可谓天赋。但是，假如你能完成 60-70% 的内容，你就曾经末尾具有成为一名大模型 AI 的正确特征了。
这份残缺版的大模型 AI 学习材料曾经上传CSDN，冤家们假如需求可以微信扫描下方CSDN官方认证二维码收费支付【保证100%收费】

(, 下载次数: 1)

欢迎光临职贝云数AI新零售门户 (https://www.taojin168.com/cloud/)