理想迈入AI大模型新时代端到端VLM全量推送开启

【ITBEAR】理想汽车近日宣布，其智能驾驶技术取得重大突破，端到端+VLM系统已正式全量推送，标志着理想汽车正式迈入AI大模型时代。这一创新技术首次亮相于今年7月的理想汽车夏季智能驾驶发布会，以一体化One Model方案和视觉语言模型VLM的部署为特色。

理想端到端+VLM系统在实际应用中表现出色，能够应对路边起步、环岛、U型掉头等复杂场景，同时基于VLM实现了对特殊道路标识和路面状况的精准识别。系统自推出以来，经过高速迭代，已在安全性、舒适性和效率上实现显著提升。

此次全量推送的版本基于V4.8.6模型，是在400万clips基础上迭代的第16个版本，主要升级了超车场景理解能力、导航信息理解能力和障碍物检测精度。

在交互方面，理想汽车也进行了创新。端到端模型文字弹窗更加丰富易懂，VLM视觉语言模型新增图文视窗，能够在特殊场景下展示模型思考过程和结果。

尽管理想汽车在智能驾驶领域算是后进者，但其采用的一体化One Model方案显示出显著优势。通过直接输入传感器信息，减少中间环节，提高了效率。然而，这一方案也面临挑战，理想汽车通过引入VLM视觉语言模型和泛化能力极强的世界模型进行测试，确保方案的安全性和高效性。

理想汽车智能驾驶副总裁郎咸朋表示，端到端技术的最大改变在于开始真正以人工智能的方式来做自动驾驶。他强调，串联式和小模块化的自动驾驶能力有明显边界，而理想汽车通过给大模型提供高质量数据并加强训练，提升模型能力，使系统能做出更好的规划和决策。

在数据量和算力方面，理想汽车也展现出强大实力。目前，其智能驾驶累积训练里程已超过25亿公里，训练算力达到5.39EFLOPS，并预计将持续增长。

随着消费者对智能驾驶技术的认可度提高，自动驾驶市场正快速发展。据预测，2024年我国自动驾驶市场规模将达到3832亿元。