在智能助手(如理想同学)成为人车交互核心的今天,算力效率直接决定用户体验。理想汽车正探索自研云端推理芯片,将车端已成熟的数据流架构拓展至云端,旨在为智能助手及自动驾驶模型提供更高效、更低成本的推理服务。这一举措体现了最新科技在汽车领域的深度渗透,也预示着科技产品形态的变革。
一、从车规芯片到云端推理:理想的技术野心
理想汽车在芯片领域的布局并非一时兴起。早在2020年,其工业分区设立后便开始自研智驾芯片,并于2025年推出全球首款基于数据流架构的端侧推理芯片马赫M100。如今,据多个信源透露,理想正将目光投向云端推理芯片,沿用与智驾芯片相同的数据流架构。这种“车云同构”的思路,在汽车行业尚属首次。
云端推理芯片与车端芯片有着本质不同。车端芯片追求低功耗、低延迟和稳定执行,而云端芯片需要同时处理更多模型,模型更新更快,输入长度和并发请求波动更大,还要应对高带宽内存、多芯片互联、动态批处理等复杂场景。理想汽车选择将车端已验证的数据流架构复用到云端,可以复用部分设计和软件工具,从而大幅分摊研发成本。这种技术路径的可行性,已在芯片行业得到认可。
值得注意的是,这一布局与理想汽车的大模型训练战略高度契合。随着智能助手所需的语言模型规模越来越大,云端推理的算力需求呈指数级增长。自研云端推理芯片,不仅能降低对第三方GPU的依赖,还能针对自身场景深度优化,让智能助手在语音理解、多模态交互上实现质的飞跃。
二、数据流架构:打破GPU垄断的另一种可能
当前AI数据中心普遍使用GPU完成模型训练和推理,但GPU并非为推理任务最优设计。云端推理芯片可以承接部分原本在GPU上运行的推理任务,包括智驾模型的数据处理、测试、仿真,以及大语言模型的请求处理。而模型训练中涉及参数更新的部分,仍需训练芯片。
数据流架构的核心理念是“数据驱动计算”,而非传统的指令驱动。它通过硬件直接调度数据流,减少指令开销,从而提升算力利用率。在车端,马赫M100的最终算力利用率达到了82%,远超传统架构。将这一架构迁移到云端,理论上可以大幅降低推理功耗和延迟。
实际上,这种架构与AI Agent技术中的实时推理需求不谋而合。AI Agent需要频繁调用多种模型进行决策,数据流架构能高效处理此类并行任务。此外,在AI图片生成等场景中,数据流架构也能加速图像生成过程中的矩阵运算。理想汽车的选择,为行业提供了一条不同于英伟达的差异化路径。
三、云端推理芯片面临的独特挑战
尽管数据流架构技术上可行,但从车端到云端并非简单放大。云端芯片需要同时处理更多模型,模型更新更快,输入长度和并发请求波动更大。举例来说,车端智能助手通常只处理单个用户的语音指令,而云端可能要同时服务数百万用户,每个用户的对话历史、上下文长度各不相同。
此外,云端推理芯片必须配备高带宽内存(HBM)和多芯片互联技术,以应对海量数据的吞吐。而车端芯片通常使用LPDDR内存,带宽需求较低。理想汽车在车端已采用8通道LPDDR5X,峰值带宽273GB/s,但云端至少需要数百GB/s甚至TB/s级别的带宽。
另一个挑战是动态批处理和集群调度。云端推理需要将不同用户的请求打包成批次,以最大化吞吐量,但批处理策略会随模型和负载变化。数据流架构在静态图场景下表现优异,但面对动态变化的请求,需要设计灵活的调度机制。理想汽车在企业数字化转型中积累的数据处理经验,可能为其提供参考。
四、马赫M100:端侧推理的标杆之作
提到理想汽车的芯片能力,不得不提马赫M100。这款基于5nm车规级工艺的端侧推理芯片,单芯片算力达1280TOPS,算力利用率82%,搭载24核ARM Cortex-A78AE处理器集群。它是全球首款基于数据流架构的大算力端侧推理芯片,曾在ISCA 2026上与谷歌、Meta等公司同台亮相。
马赫M100的成功,为理想汽车积累了宝贵的架构设计经验。其“编排式数据流架构”能够灵活调度不同AI模型的计算图,在车端实现毫秒级响应。这一架构同样适用于云端推理,只需将多个AI计算晶粒封装在一起,配合高带宽内存和高速互联,即可组成规模更大的推理芯片。
这种“车云同源”的设计思路,使得理想汽车可以复用现有软件工具链,降低开发成本。比如,开发者可以使用同一套编译器和运行时环境,在车端和云端部署模型。这意味着未来AI工具导航上可能会涌现出更多针对理想芯片的优化工具,进一步降低开发门槛。
五、智能助手与芯片协同:理想汽车的全栈布局
对于理想汽车而言,自研芯片的最终目标是为了提升用户体验,尤其是智能助手(理想同学)的交互体验。当前智能助手需要处理语音识别、自然语言理解、情感分析、任务规划等多种模型,每个模型对延迟和功耗的要求不同。通过自研芯片,理想可以针对这些模型进行深度定制,实现端云协同。
例如,在车端,马赫M100可以实时处理本地语音指令,无需联网即可完成基本操作;而在云端,自研推理芯片可以处理更复杂的语义理解和多轮对话,同时支持大规模模型更新。这种“端侧轻量、云端强大”的架构,正是当前智能助手领域的主流趋势。
此外,理想汽车还在探索将智能助手与文生图能力结合,让用户通过语音指令生成车内场景图片。这类功能对推理算力要求较高,自研芯片能提供更低的成本和更高的效率。未来,用户甚至可能通过AI网名生成功能,为智能助手定制个性化昵称,这些都需要芯片层面的支持。
六、行业影响与未来展望
理想汽车自研云端推理芯片,不仅是对自身技术壁垒的加固,更可能引发汽车行业新一轮“芯片军备竞赛”。传统车企大多依赖第三方芯片供应商,而理想通过自研,掌握了从车端到云端的全栈算力。这对其竞争对手(如蔚来、小鹏)构成了压力,也促使更多车企考虑自研芯片。
从更广的视角看,这一趋势与最新科技的发展方向一致:AI芯片正从通用走向专用,从云端走向边缘,从训练走向推理。理想汽车将数据流架构从车端延伸到云端,实质上是将“专用化”推向了极致。
对于消费者而言,这意味着未来智能助手将更加智能、响应更快,同时成本更低。理想汽车可能在2027年推出首款自研云端推理芯片,届时其智能助手的能力将大幅提升。而科技产品的形态也将随之改变——汽车不再只是交通工具,而是移动的智能空间。
当然,这一项目仍处于早期阶段,技术风险和市场不确定性并存。但理想汽车敢于在GPU垄断的背景下另辟蹊径,本身就体现了对技术创新的执着。我们期待看到更多类似AI工具箱这样的配套工具,帮助开发者充分发挥自研芯片的潜力。