斯图尔特·罗素：大模型只是AGI的一块孤立拼图，还有拼图没找到

来源：澎湃新闻

记者 吴天一 实习生 陈晓锐

·“我不认为了解人工智能安全的唯一途径，是在现实世界中部署一个系统的数亿个副本，然后观察结果。”人类不会对疫苗这么做，“我们在部署疫苗之前必须先测试它，因为我们将把它注射到数亿人身上。”

·“我们不了解大型语言模型以及它们如何工作。我们需要有这种理解，以便对安全有信心。人类构建AI系统的技术，不应该依赖大量的数据训练和内部结构未知的黑箱。”

美国加州大学伯克利分校计算机科学教授斯图尔特·罗素在2023北京智源大会上发表主旨演讲。

“人工智能就像是一块来自未来的巨大磁铁在牵引我们前进，如何确保自己不会被超越人类的智能所控制？”6月10日，美国加州大学伯克利分校计算机科学教授、人类兼容人工智能中心（Center for Human-Compatible AI）主任斯图尔特·罗素（Stuart Russell）在2023北京智源大会上发表演讲称，人工智能系统的设计必须遵循两个原则。首先，AI的行为必须符合人类的最大利益；第二，AI自己不应该知道这些利益是什么。

在对话环节，罗素与图灵奖得主、中国科学院院士姚期智共同探讨了人工智能的长期未来及其与人类的关系，罗素引用中国古代哲学家孟子“博爱”的观点，“未来，当人工智能系统在代表社会做出决策时，应当合理地考虑到每个人的利益。”

罗素与他人合著的《人工智能：一种现代的方法》被誉为人工智能领域最受欢迎的教科书，被135个国家的1500多所大学采用。2022年，国际人工智能联合会议（IJCAI）授予罗素卓越研究奖，他此前已获得IJCAI计算机与思想奖，由此成为世界上第二个能够同时获得两项IJCAI主要奖项的科学家。

通用人工智能还很遥远

在北京大会现场，罗素在题为《AI: Some Thoughts?（一些关于AI的思考）》的演讲中对通用人工智能（AGI）做出了定义：通用人工智能是指在大多数经济有价值的任务上超越人类能力的人工智能系统。这种人工智能系统可以比人类更好更快地学习和执行任何任务，包括人类无法处理的任务，并且由于机器在速度、内存、通信和带宽方面的巨大优势，未来，通用人工智能在几乎所有领域都将远远超过人类的能力。

那么，人类距离通用人工智能还有多远的距离呢？罗素表示，我们离通用人工智能还很遥远。“事实上，仍然存在许多尚未解决的重大问题。”

罗素在演讲中指出，ChatGPT和GPT-4并不理解世界，也没有在“回答”问题，“如果说通用人工智能是一件完整的拼图，大语言模型仅仅只是其中的一块，但我们并不真正了解如何将它与拼图的其他部分连接起来，以真正实现通用人工智能。”他说，“我相信甚至还有部分缺失的拼图没有被找到。”

罗素认为，目前的人工智能系统存在一个根本性的弱点，即它们使用电路来生成输出。“我们正试图从电路中获得高度智能的行为，而电路本身是一种相当有限的计算形式。”他认为，电路无法准确地表达和理解一些基本的概念，这意味着这些系统需要大量的训练数据来学习一些可以用简单的程序定义的函数。他认为，未来人工智能的发展方向应该是使用基于明确的知识表征的技术。

“抛开技术问题不谈，如果我们确实创造了通用人工智能。接下来会发生什么？”罗素引用现代计算机科学奠基人艾伦·图灵的话说，“机器思维方法一旦开始，用不了多久就会超越我们微弱的力量，这似乎很可怕。”

“我们如何永远确保自己不会被人工智能所控制？这是我们面临的问题——如果找不到这个问题的答案，那么我认为别无选择，只能停止开发通用人工智能。”罗素表示。

今年3月，罗素曾与特斯拉CEO埃隆·马斯克、“AI教父”杰弗里·辛顿（Geoffrey Hinton）等上千人签署公开信，呼吁暂停训练比GPT-4更强大的AI系统至少六个月。

罗素在会上强调，解决问题的答案是有的。人工智能系统的设计必须遵循两个原则。首先，AI的行为必须符合人类的最大利益；第二，AI自己不应该知道这些利益是什么。因此，它们不确定人类的偏好和未来，这种不确定性会给人类控制权。

罗素称，人们需要改变观念，不要追求“机器必须是智能的”，而要注重机器的“有益性”，使之符合人类的根本利益。“外星人是非常智能的，但我们并不一定希望它们来到地球。”

AI与孟子的博爱思想

在对话环节中，罗素与姚期智进行了一场深刻而富有洞见的讨论。