ChatGPT之父Sam Altman：大型AI企业，将诞生于哪些领域？（下）

源自：经纬创投

2、当 AI 科学家可以自我迭代

Q：无论是建立在 API 之上，还是科学家使用 API，有哪些地方的科学会加速，以及如何加速？

A：现在科学界对AI的应用分为两种。一种是将AI工具直接用于科学目的，如AlphaFold（用于蛋白质结构预测），它们可以创造巨大价值，相信未来会出现无数这样的工具。

另一种是将AI工具用于提升科研工作效率，如帮科学家和工程师找到新研究方向、写代码等。Copilot编程工具就是一个例子。但AI工具的能力远不止于此。上述两种AI应用将会大大推动科技前进。

此外，目前科学界也在探索对AI的第三种应用方式——让AI成为可以「自我改进」的科学家。这件事情既有好处也有风险。

好的一面是，可以利用AI将人类的工作内容自动化，教会AI做任何人类可以做的事情：探索新科学、提出理论解释、验证、思考等，或许还可借此解决困扰人类已久的「AI对齐问题（Alignment Problem）」（即如何让AI系统的目标符合人类的价值观）。风险在于，有人担心懂得「自我改进」的AI有可能会像科幻小说描写的那样，擅自改动代码或修改优化算法。

我深信，真正有利于促进人类和经济的前行的，是一个能够推动科学进步的社会架构。我们能从这样的社会架构中获益很多。

Q：「对齐问题」可能值得解释一下？

A：建立一个非常强大的系统，如果它不按我们的意愿行事，或者它的目标与我们的冲突，就会变得非常糟糕。

因此，对齐问题是：我们如何建立做最符合人类利益事情的 AGI（Artificial General Intelligence 通用人工智能）？如何确保人类能够决定人类的未来？

我们如何避免意外和故意误用，前者是没有预料到的错误，后者是一个坏人使用 AGI 造成巨大伤害；内在而言的对齐问题是，如果这个东西变成一个生物，视我们为威胁怎么办？

我们对如何在小范围内解决对齐问题有一些想法，已经能够使 OpenAI 最大的模型（表现得）比想象的要好。我们对下一步做什么有些想法，但不能诚实地看着任何人的眼睛说，看到了 100 年后将如何解决这个问题。但是，一旦人工智能足够好，我们可以问它，「嘿，你能帮助我们做对齐研究吗？」这将是工具箱里的一个新工具。

Q：我们之前的一次谈话是，能不能告诉 agent(注：AI 中的一个概念，通常指环境中的智能主体），「不要种族歧视」？

A：当然。一旦模型变得足够聪明，真正理解了种族主义是什么样子，以及它有多复杂，你就可以说，「不要成为种族主义者。」

Q：「AGI」这个术语已经被广泛使用。有时困惑来自于人们对 AGI 有不同定义。你如何定义 AGI，怎样知道我们什么时候实现它？

A：我理解的AGI相当于一个可以共事的普通人，任何远程同事可以通过电脑帮你完成的工作，AGI也可以做，包括让AGI学习医疗知识和写代码等等。

AGI的重点不在于掌握某一种难得的技能，而是拥有学习的元能力，然后只要人类需要，它就可以往任何技能方向发展并精通。另一个概念是「超级智能」（Super Intelligence），它指的是比全人类加起来还要聪明的智能。

Q：如何看待像 GPT-3 这样的基础技术，对生命科学研究进度的具体影响？生命科学研究中速率限制的因素是什么？我们无法超越这个限制，因为自然法则就是这样？

A：目前的可用模型还不够好，不足以对生命科学领域产生重大影响——不少生命科学家了解这些模型之后都说，它们只能在部分情况下发挥些许作用。AI在基因组学领域有一些很有前景的应用方向，但目前尚属起步阶段，不过我很看好。我认为这也是市值千亿的巨头准备进军的领域之一。

如果AI未来真的可以让医药公司的研发速率提高几百倍，那无疑会产生深远的影响。不过如你所说，生物学的自有规律仍在，新药的临床验证需要时间，这也是医药研发的速率限制因素。

据我所知，不少合成生物公司借助AI发现许多新的研发想法，加快自己的研发迭代周期，但研发出来之后终究是要进行测试，这部分时间无法缩减。

我认为，医药初创公司最重要的是低成本和快速的研发周期，有了这两点就有资本参与市场竞争了。所以如果我是一家医药初创公司的决策者，一开始我不会选择从心脏病这类大难题下手。此外，如果我是一家AI药物研发初创公司，我会在模拟器上多下工夫，因为目前这方面还亟待改善。

分子效果图｜来源：ANIRUDH on Unsplash

3、未来十年：当成本的结构发生变化

Q：你认为登月计划（指 AI 的进化）在未来几年中有什么值得人们关注的地方？

A：一个比较确定的方向是，语言模型的发展会远超今天的想象。虽然很多人都说算力和数据都已经跟不上了，这也是事实，但算法的改进空间依然很大，还可以带来很大的进步。

第二个方向是多模态模型的发展。未来的多模态模型将不局限于文本和图像的互相转换，而是所有模态之间都可以方便地互相转化。

第三个方向是，模型可以持续学习。目前的模型如GPT都停滞在当初训练好的状态，并不会随着使用次数的增加而自我优化。我相信未来可以改变这一点。

如果上述三点都能实现的话，我们就可以解锁无数全新的应用场景，实现真正的科技革新，帮助人类实现科技的飞跃式前进。而且我相信，我们也有办法利用AI推动科研进步和新知识的产生。

我认为，现在普遍存在的一种错误观点是：「虽然语言模型的功能已经比较完善，还可以应用到图像和视频领域，将应用智能的边际成本降得非常低，但归根结底，它只是模仿人类做过的东西，不能为人类产生新知识，不能治疗癌症，也不能拓展人类已知的科学领域。」我相信，AI的发展会让持这种观点的人大吃一惊。

Q：谈一谈目前被广泛讨论的领域，例如，AI 和核聚变。

A：业内有人正在研究利用强化学习模型控制核聚变反应，但据我们所知，AI模型在这里发挥的作用还非常有限。

一件不幸的事情是，AI 已经成为一个流行词（buzzword），这通常是个很糟糕的迹象。我希望这并不意味着这个领域即将分崩离析。但从历史上来看，这对于新的创业公司来说是一个非常糟糕的信号。我认为这是个人们会说一切都是「这个加上 AI」的领域，很多事情都是真的。我确实认为这将是这一代最大的技术平台。

我们喜欢在前沿领域做预测，预测和理解规模理论（scaling laws）是怎样的（或是研究之后），然后说「好，这个新事物将发挥作用，就根据种方式来预测推演。」

这也是OpenAI的运作模式——先做摆在我们面前的最有信心能成功的事情，然后分出10%的资源进行成功确定性更低的探索工作。这种运作方式为我们带来巨大的成功。

现阶段不应该把重点放在「让AI无所不能」上，而是先沿着现有的道路慢慢发展完善AI，然后留有开放探索的空间——伟大的事物都不是计划出来的，有时重大的突破诞生于偶然。

Q：AI 应用在非常重要的系统，例如金融市场，将会发生什么？

A：AI终将渗入人类生活的方方面面。未来十年里，智能和能源的边际成本会迅速下降，趋近于零，而智能和能源又是其他各行各业的主要成本来源（当然，奢侈品除外）。

整个社会的成本结构都会下降，正如之前多次科技革命的结果一样。在这种浪潮之下，很少有什么会一成不变。但有一点很重要，智能和能源成本只是趋近于零，而不是直接降为零。所以将来如果有人仍愿意花费巨额投资来购买智能和能源，他们得到的算力和能源的数量将突破想象。

设想一下，将来的能源使用成本下降10~100倍，智能使用成本下降1亿倍，而对能源和智能的资金投入则比现在多1000倍，那会是什么样的局面？

Q：AI 可以为人类创造者提供工具，拓展创造力。那么，让创造者更有生产力\AI 用创造力自己去做每件事的界限是什么？

A：至少目前看到的不是取代，主要是增强。在某些情况下，它正在取代。但对于这些领域的人们想从事的大多数工作来说，它是增强。这种趋势将持续很长一段时间。可能展望 100 年，它可以完成整个创造性工作。

我觉得有意思的是，如果 10 年前问人们，AI 将如怎样带来影响，多数人会很有信心地说，首先它将取代工厂的蓝领工作，卡车司机等，然后将取代低技能的白领工作，然后是高技能、高智商的白领工作，比如程序员。也许永远不会取代那些创造性的工作。现在的发展正好相反。

这说明预测未来是多么困难。这也说明人类可能不够了解自己，不清楚什么类型的技能最难、最需要调动大脑，或者错误估计了控制身体的难度。

Q：你认为 AI 不会改变生活的哪些方面？

A：所有深层生物学的东西。我们仍然会真正关心与他人的互动，仍然会享受乐趣，大脑的奖励系统仍然会以同样的方式工作。我们仍然会有同样的动力去创造新事物，为愚蠢的地位竞争，去组建家庭等。五万年前人类在意的东西，一百年后的人类也会在意。

《银翼杀手2049》剧照 | 图片来源：豆瓣

Q：在未来的 20 到 30 年里，随着人工智能的不断发展，会出现主要的社会问题吗？我们今天能做什么来缓解这些问题？

A：AI的应用会极大影响经济活动。将来我们需要形成新的社会契约，考虑如何公平地分配财富。AGI系统的使用权将会成为一种商品，所以也要考虑如何让所有人平等地获得使用AGI的机会。还有AGI的管理问题：人类如何共同决定AGI可以做什么、不能做什么。

我不担心「AI取代人类的工作之后，人类何去何从」的问题，虽然未来人类的工作会和现在很不一样，但我觉得人类最终都会找到自己满意的事业，过上充实的生活。真正的难题是财富分配、AGI使用权和AGI的治理问题。

我们进行了世界上最大的 UBI 实验（Unconditional Basic Income，无条件基本收入）。五年计划还剩下一年零四分之一的时间。这不是唯一的解决办法，但我认为这是一件伟大的事情。应该再尝试 10 件这样的事情。我们还尝试了不同的方法，从我们认为将受到最大影响的群体那里获得意见，并看如何在周期的早期阶段行动。最近我们探索了如何将这项技术用来重新培训那些早期将受到影响的人，也会尝试做更多这样的事情。

注：无条件基本收入，指没有条件、没有资格审查，公民可以定期领取由政府或特定组织给予的一笔资金。

4、One more thing

我想，没人知道我们正处在 AI 的悬崖边上。人们会说「要么会很棒，要么会很糟糕」，你得做最坏的打算。说一切都会好起来，这并不是一个策略。不过你可能会有某种感觉：我们将到达一个美好的未来，并且尽所能的努力工作，为之奋斗，而不是一直从充满恐惧和绝望的地方采取行动。