工程院院士张亚勤：预训练、生成式大模型，将带来自动驾驶技术范式新变革

图片来源：由无界 AI生成

以GPT为代表的生成式大模型的出现，让人工智能技术再次发生跃迁，AI技术正在经历从判别式到生成式的技术范式变革过程。随着生成式、预训练、多模态等大模型技术的引入也在为自动驾驶技术走向成熟的无人化提供了可能。

来自全球领先的人工智能研究机构清华智能产业研究院（AIR）与国内领先的自动驾驶AI技术公司毫末智行，在对大模型的技术趋势上及应用上有着惊人的一致判断。同时，双方也已经在基于数据驱动决策优化方向上展开深入探索，共同推动全方位、多层次的产学研深度合作，加速AI技术在自动驾驶领域的落地应用。

2023年10月11日，中国工程院院士、清华大学教授、清华智能产业研究院（AIR）院长张亚勤现场出席毫末智行举办的第九届HAOMO AI DAY，发表了题为《智能驾驶新进展——Big Model, Generative Al and Intelligent Driving》的主题演讲，分享了他对生成式AI大模型应用于自动驾驶技术的最新思考，以及介绍了清华AIR在构建Real2Sim2Real基础模型平台、自动驾驶仿真平台等最新成果。

以下是张亚勤院士的演讲全文：

这么美丽的天气，这么漂亮的地方，很高兴参加HAOMO AI DAY，也感谢张凯董事长和维灏的邀请。

今天是第九届HAOMO AI DAY，首先我要祝贺毫末在不到4年的时间里取得了很大的成绩，特别是走出一条自己的路。我印象当中毫末是最先在自动驾驶方面发布了生成式大模型DriveGPT，也很快地走向规模化，在这么短的时间就能够成为自动驾驶领域的领军企业。

今天我想谈一下在智能驾驶方面新的进展，这些年我一直用同样的题目，但是每一次会发现里面的内容都完全不同，特别是最近生成式AI出来之后，对自动驾驶有了很大的推进。

我们一直讲新的“四化”——网联化、智能化、共享化、电动化，其中最重要的是两化——电动化、智能化。电动化可以理解成是新能源，现在中国已经是全球最活跃、最大的新能源市场，不管是在用户规模或者出口规模都是全球第一，这是新汽车的上半场。下半场最重要的是智能驾驶，未来5-10年全球竞争的热点和制高点就是自动驾驶。人工智能是自动驾驶核心的技术驱动力，毫末从一开始成立就以AI作为公司的技术引擎，所以HAOMO AI DAY十分重要。

为什么这么多的企业都在做智能驾驶？包括传统汽车厂商、新势力、高科技企业都在进入自动驾驶市场？其实，这里面有很多的技术挑战，首先从AI的角度来看，自动驾驶是高度复杂的，需要很多算力、新算法，是最具有挑战的AI垂直领域问题，其次，自动驾驶也是目前看到的聚生智能、边缘智能、自主智能的交集。刚刚毫末的测试视频里可以看到自动驾驶面对这么多的复杂场景和变化，确实有很多的挑战。

但是，我认为自动驾驶是完全可以实现的，其中有一些关键的问题，有一些是市场的因素，有一些是非市场的力量。市场的因素包括技术是否可行？用户有没有真正需求？产业生态及商业模式。非市场因素也很重要，需要行业有技术突破，也需要有政府产业方面的支持，以及与政策法规突破。

在技术方面，一开始很多人在讲无人驾驶是否可行，特别是L4以上是否可行？我从一开始认为就是可行的。最近看到一些数据，无人驾驶比有人驾驶安全10倍左右，在去年我还在讲是3倍，今年已经到了10倍。这说明技术突破已经完成。在商业化路线图上，目前也有各种各样的方式，有一些是用单车智能，有一些车路协同，还有渐进式、跳跃式的路线，开源、封闭的路线，不同企业都在探索不同的路线图，没有说哪一个是完全正确的，产业在用不同的方式尝试自动驾驶。我知道毫末选择了渐进式，我觉得这些都很好，大家用不同的方式去探索。

最近在AI方面有很多新的突破。我们看到新的算法、新的框架，特别是预训练、多模态、多监督学习、大模型成为主流。在Transformer之前，ResNeT曾经是作为非常广泛应用的视觉算法框架，我之所以特别提到ResNeT，这个算法其实是中国的年轻科学家在中国完成的，因此中国科学家对于人工智能有着很大的贡献。我听到很多的说法，认为AI的核心主要是从欧洲来的，基本的理论是从那里来的，但是中国科学家在人工智能领域也做出了很多的贡献。