全文来了！张宏江对话OpenAI Altman：AGI会从根本上改变文明，不会很快有GPT-5

来源：华尔街见闻

作者：葛佳明

6月10日，OpenAI创始人Sam Altman以视频连线的方式现身于中国北京举办的2023智源人工智能大会，这是Altman首次对中国观众发表演讲。

Altman在演讲中引用了《道德经》，谈及大国合作，表示AI安全始于足下，各国间必须进行合作和协调。

随后Altman接受了智源研究院理事长张宏江的一对一问答。

张宏江博士目前任北京智源人工智能研究院理事长，同时担任多家公司的独立董事和顾问。曾任金山集团执行董事及首席执行官兼金山云的首席执行官，是微软亚洲研究院创始人之一，曾担任副院长、微软亚太研发集团（ARD）首席技术官及微软亚洲工程院（ATC）院长以及微软“杰出科学家”。

加盟微软之前，张宏江曾任美国硅谷的惠普实验室任经理；此前还在新加坡国立大学系统科学研究院工作。
Altman演讲核心内容：

1. 当下人工智能革命影响如此之大的原因，不仅在于其影响的规模，也是其进展的速度。这同时带来红利和风险。
2. 随着日益强大的 AI 系统的出现，全球合作的重要性从未如此之大。在一些重要的大事上，各国间必须进行合作和协调。推进 AGI 安全是我们需要找到共同利益点的最重要的领域之一。
3. 对齐仍然是一个未解决的问题。GPT-4 花了八个月的时间完成对齐方面的工作。但相关的研究还在升级，主要分为扩展性和可解释性两方面。

问答环节核心内容：

1. 十年内人类将拥有强大的人工智能系统（AI System）。
2. OpenAI没有相关的新的有关开源的时间表，开源模型具有优势，但开源一切可能并不是一条（促进AI发展的）最佳路线。
3. 看明白神经网络比看明白人类脑子容易多了。
4. 在某个时候，会尝试做GPT-5的模型，但不会是很快。不知道具体GPT-5出现的时候。
5. AI安全需要中国研究者的参与和贡献。

注：“AI对齐”是AI控制问题中的最主要的问题，即要求AI系统的目标要和人类的价值观与利益相对齐（保持一致）。

Sam Altman演讲内容：

随着日益强大的人工智能系统的出现，全球合作的赌注从未如此之高。

如果我们不小心，一个旨在改善公共卫生结果的错位的人工智能系统，可能会提供没有根据的建议，从而扰乱整个医疗保健系统。同样，为优化农业生产而设计的人工智能系统可能会无意中耗尽自然资源或破坏生态系统，因为缺乏对影响粮食生产的长期可持续性的考虑，这是一种环境平衡。

我希望我们都能同意，推进AGI安全是我们需要共同努力，寻找共性的最重要领域之一。

我发言的其余部分将集中在我们可以从哪里开始：1.第一个方面是AGI治理，AGI从根本上成为了改变我们文明的强大力量，强调了有意义的国际合作和协调的必要性。每个人都会从合作治理方法中受益。如果我们安全、负责任地驾驭这条道路，AgI系统可以为全球经济创造无与伦比的经济繁荣，解决气候变化和全球健康安全等共同挑战，并提高社会福祉。

我也深深地相信在未来。我们需要在AGI安全方面进行投资，才能到达所想要达到的地方，并在那里享受它。

要做到这样我们需要认真协调。这是一项具有全球影响力的全球技术。不计后果的开发和部署所造成的事故成本将影响到我们所有人。

国际合作中，我认为有两个关键领域是最重要的。

首先我们需要建立国际规范和标准，并注意过程中注重包容性。在任何国家使用 AGI 系统，都应平等而一致地遵循这样的国际标准和规范。在这些安全护栏内，我们相信人们有足够的机会做出自己的选择。

第二，我们需要国际合作，以可核查的方式建立对安全开发日益强大的 AI 系统的国际间信任。我并不妄想这是一件容易的事，需要投入大量和持续的关注。

《道德经》告诉我们：千里之行，始于足下。我们认为，在这方面最具建设性的第一步是与国际科学和技术界合作。

需要强调的是，我们应该在推动技术进步这一方面增加透明度和知识共享的机制。在AGI安全方面，发现新出现的安全问题的研究人员们应该为了更大的利益分享他们的见解。

我们需要认真思考如何在鼓励这种规范的同时，也尊重和保护知识产权。如果我们这样做，那么，它将为我们深化合作打开新的大门。

更广泛地来讲，我们应该投资于促进和引导对AI对齐和安全的研究。