对话科学家曾毅：中国大模型水平不及GPT-4，我为何签名支持暂停巨型AI研发？

图片来源：由无界 AI工具生成

2023年3月29日，非营利组织未来生命研究所（Future of Life）发表一封公开信，呼吁暂停研发比GPT-4更强大的人工智能系统至少6个月，包括特斯拉CEO马斯克、Stability AI的首席执行官莫斯塔克（Emad Mostaque）等在内的1000多名该领域的专家、科技人员、产业高层都在这封公开信上签了名，在这封信上， 我们也看到了一位中国科学家的名字—曾毅（中国科学院自动化研究所人工智能伦理与治理中心主任）。

这封公开信，虽无法律效力，但是引起了公众对人工智能治理的问题的空前关注，我们特别找到曾毅主任，问他是否方便谈一下为何在这封公开信上签名。他回复得很果断：“肯定可以说，而且要说清楚。”在对话中，我们也向他提了一个比较尖锐的问题：“AI领域的技术研发落后是更可怕，还是继续研发人工智能带来的潜在风险更可怕？”曾毅的观点很明确：“用一种竞争的视角来分析这个问题的时候就会使人不理性，中国目前的水平还没达到GPT-4，我赞同的是发展信息处理能力接近GPT-4的大模型，但是在伦理安全治理方面的规制与思考要远远超越GPT-4这样的大模型的研发。”

在与曾毅的对话中，我们还请教了以下问题：

①如果用暂停六个月换取时间窗口，我们最急需解决人工智能带来的哪些负面影响？

②大模型的技术原理并没有被完全弄清楚，就被大规模推向普通用户，这是不是一种不负责任的做法？

③用大量数据“投喂”的训练方法，是否真的能让人工智能产生意识？

④通过了图灵测试，就意味着人工智能拥有了“人类智能”吗？

⑤国内大模型在两三个月内“扎堆推出”，有哪些潜在风险？

⑥应对人工智能时代的到来，孩子们应该从小就开始学习人工智能课程吗？

以下为对话内容：

暂停超过GPT-4水平的巨型人工智能研发很有必要

腾讯科技：您在暂停超过GPT-4水平的巨型人工智能研发公开信上签了名，是在公开信公布之前，就已经收到了邀约吗？

曾毅：在这个信发起之前，确实是通过了不同的渠道在向我们发出邀请。但是我真正签字也是在它发布之后。

我之所以支持这样一个倡议确实是基于我对现在人工智能的大模型快速地介入到社会服务当中的担忧。因为在GPT3.5的时候，它的隐患就已经显现了。到了GPT4发布的时候，它的能力不限于文本的交互，已经到了多模态的内容生成，曝露出来的风险会更多。

GPT系列跟以前的人工智能的发展模式非常不一样。以前的人工智能，比如我做一个人脸识别的系统，人脸的信息是什么样的，输出可能有多少类？其实相对来说都是可预期的。但是现在GPT的数据是互联网的数据，这些数据中包含“谁说过什么”都不可预期，另外一端谁去问什么问题也不可预期。问了问题之后，ChatGPT的反馈是什么样的，更不清楚。这样一来，就至少有三重不确定性，使得未来人工智能在服务于人类社会的时候，一旦它存在潜在的风险，它将以什么样的模式和速度去放大？这个真是非常难以预期的。

可以说它在带给我们超级能力的同时，带给我们的风险也是巨大的。所以就像公开信中提到的，我们准备好了让这样的技术替代我们原本很满意的工作吗？我们准备好让这种文本生成的技术去干扰甚至替代人类的文明吗？还有对于技术的安全伦理道德方面是不是让它做好了准备，去服务于这么广泛的用户？公开信中提到的一系列的问题，没有一个问题我们做好了准备，但是它的大规模的应用已经开始了。

所以那个时候大家说中国应不应该做？我说这个问题不用讨论，中国很快就会出来。要担心的问题是一个地方会有几套大模型出来。我们现在这个现状就是这样的。大学里可能有两三套大模型都是基础模型，科研院所甚至更多，产业更是数不胜数。倒是我从来没有发现某一个人工智能企业说我绝对不做大模型。几乎可以这样说，人工智能企业现在都在布局大模型的研究。但是，很少有人说我们如何去防范这些风险。

这是那封公开信的意义和价值。正因为我们对于可能的潜在的风险还完全没有准备好，但是已经开始过早、过于激进地尝试，所以我觉得暂停6个月是必要的，先去解决潜在的风险，我们先好好地思考一下。

能力达到GPT4这个层次的大模型已经能够满足我们很多的需求，那么我们要不要先做基于不超越GPT-4这个能力的产业化的应用，然后同步地解决它潜在的问题？但是，比它性能再高等的人工智能的大模型是不是能先暂缓？我觉得这个既是这封信的初衷，也是我签这封公开信的动机。

腾讯科技：是不是中国还没到GPT-4的水平，我们可以先继续？