ChatGPT发布一年后，马斯克的大模型Grok也将正式上线

原文来源：阿尔法公社

图片来源：由无界 AI生成

在ChatGPT发布一年之后，生成式AI已经成为一个具有确定性的技术浪潮，而伊隆·马斯克旗下的xAI公司计划在本周将它11月初发布的大模型Grok接入X平台（推特），对X Premium+订阅者们开放。

xAI在今年7月成立，之后迅速训练出Grok-0这个基础模型，然后又经过调优进化成Grok-1。这个模型虽然参数只有大约330亿，但是能力已经超过llama2 70B和GPT-3.5，尤其在数学和编码方面表现突出。研究团队也在大模型的推理能力和可靠性方面开展研究。

马斯克组建了一个豪华的核心技术团队，团队成员们来自DeepMind、OpenAI、谷歌研究院、微软研究院、特斯拉和多伦多大学，主导过多个AI基础算法研究和知名AI项目，华人比例奇高，其中还有两位研究人员的论文引用数超过20万。

Grok将通过独家访问X（原推特）及其实时的用户生成的帖子和信息来实现差异化，它能访问在X上发布的最新数据，并在用户询问实时问题时提供最新信息。

如果您对人工智能的新浪潮有兴趣，有见解，有创业意愿，欢迎扫码添加“阿尔法小助理”，备注您的“姓名+职位”，与我们深度连接。

打造“追求真理的”的AI，马斯克组建了豪华核心团队

作为xAI的创始人，马斯克对AI有深刻的积累和认知。一方面，早在2013年，他就开启了特斯拉在自动驾驶方面的探索，目前特斯拉的自动驾驶硬件迭代到第四代，FSD算法迭代到V12版本，并将在近期更新。

另一方面，马斯克是OpenAI的联合创始人之一，当OpenAI还是非盈利研究组织时，他为OpenAI注入了5000万-1亿美元资金，支持它的早期发展。而OpenAI的联合创始人之一Andrej Karpathy在2017年6月-2022年7月担任特斯拉的AI总监，主导着特斯拉的自动驾驶项目。

2018年，马斯克离开了OpenAI，根据OpenAI的博客文章和马斯克后来的推文，理由是防止随着特斯拉更加专注于人工智能而与OpenAI产生利益冲突；根据Semafor报道，马斯克曾提议他接管OpenAI的领导，并在提议被拒绝后离开；而《金融时报》报道称，马斯克的离开也是由于与其他董事会成员和员工在OpenAI的人工智能安全方法上的冲突。

在离开OpenAI多年，且ChatGPT引发了AI热潮后，马斯克于今年7月宣布成立xAI，这家公司的目标是构建能“理解宇宙真正本质”的人工智能。

马斯克在接受采访时表示：“从人工智能安全的角度来看，一个极度好奇的人工智能，一个试图理解宇宙的人工智能，将会支持人类。”

豪华的核心技术团队

马斯克搭建了一个豪华的核心技术团队，他们来自DeepMind、OpenAI、谷歌研究院、微软研究院、特斯拉和多伦多大学。

他们在过去主导过不少AI研究和技术的突破，例如Adam优化器，对抗性示例，Transformer-XL，Memorizing Transformer，自动形式化等。此外，还包括AlphaStar、AlphaCode、Inception、Minerva、GPT-3.5和GPT-4等工程和产品方面的重要成果。

这个团队除了来自大厂和研究院外，还有一个特点是大多数拥有扎实的数学、物理背景。

例如xAI联合创始人杨格（Greg Yang ）在哈佛取得数学学士与计算机硕士学位，师从丘成桐。丘成桐带着杨格出席活动、认识各个方向的博士生、数学家，还推荐他申请数学界本科生能取得的最高荣誉：摩根奖。

杨格透露，xAI将深入研究人工智能的一个方面—“深度学习的数学”，并“为大型神经网络发展‘万物理论’”，以将人工智能“提升到下一个层次”。

除了作为联合创始人的杨格外，在核心团队中还有张国栋 （Guodong Zhang），戴自航 （Zihang Dai），吴宇怀（Yuhuai Tony Wu），以及之后加入的Jimmy Ba、xiao sun、Ting Chen等华人成员，他们都在底层技术上有建树。

戴自航（Zihang Dai）是CMU和Google Brain于2019年发布预训练语言模型XLNet论文的共同一作，这个模型在20项任务上超越了当时的SOTA模型BERT。