黄仁勋最新专访:称华为是个好公司,分享对GPU未来和竞争对手的看法(上)
摘自wired 半导体行业观察
让我们来看一下这个采访原文
黄仁勋:你和我都是斯坦福大学的毕业生。
Lauren Goode:是的。嗯,我读的是新闻专业,而你没有读新闻专业。
黄仁勋:我希望我有。
Lauren Goode:这是为什么?
黄仁勋:嗯,作为领导者和个人,我真正敬佩的人是 Adobe 首席执行官尚塔努·纳拉延 (Shantanu Narayen)。他说他一直想成为一名记者,因为他喜欢讲故事。
Lauren Goode:能够有效地讲述企业的故事似乎是建立企业的重要组成部分。
黄仁勋:是的。战略制定就是讲故事。文化建设就是讲故事。
Lauren Goode:您曾多次说过,您并没有根据宣传材料推销 Nvidia 的想法。
黄仁勋:这是正确的。这实际上是为了讲故事。
Lauren Goode:所以我想从另一位技术主管告诉我的事情开始。他指出,英伟达比亚马逊早一年,但在很多方面,英伟达比亚马逊更有“day one”的做法。您如何保持这种前景?
黄仁勋:坦白说,这确实是一个好词。我每天早上醒来都像第一天一样,原因是我们总是在做一些以前从未做过的事情。它也有脆弱的一面。我们很可能会失败。刚才,我正在开会,我们正在做一些对我们公司来说是全新的事情,但我们不知道如何正确地做。
Lauren Goode:什么是新事物?
黄仁勋:我们正在建设一种新型的数据中心。我们称之为人工智能工厂。按照当今数据中心的构建方式,很多人共享一组计算机并将他们的文件放在这个大型数据中心中。人工智能工厂更像是一台发电机。这是相当独特的。过去几年我们一直在构建它,但现在我们必须将其变成产品。
Lauren Goode:你打算怎么称呼它?
黄仁勋:我们还没有给它命名。但它会无处不在。云服务提供商将构建它们,我们将构建它们。每个生物技术公司都会有它。每个零售公司,每个物流公司。未来的每家汽车公司都将拥有一家制造汽车(实际商品、原子)的工厂,以及一家为汽车制造人工智能(电子)的工厂。事实上,就在我们说话的时候,你看到埃隆·马斯克正在这样做。在思考工业公司未来会是什么样子方面,他远远领先于大多数人。
Lauren Goode:您之前曾说过,您经营的是一个扁平化组织,有 30 到 40 名高管直接向您汇报,因为您希望融入信息流中。最近是什么激起了你的兴趣,让你想,“我最终可能需要在这件事上押注 Nvidia?”
黄仁勋:信息不必像尼安德特人时代那样从组织的顶部流向底部,当时我们没有电子邮件和短信以及所有这些东西。如今,信息流动得更加迅速。因此,不需要从上到下解释信息的分层树。扁平网络使我们能够更快地适应,这是我们所需要的,因为我们的技术发展如此之快。
如果你看看英伟达技术的发展方式,就会发现摩尔定律每隔几年就会翻一番。嗯,在过去 10 年里,我们已经将人工智能进步了大约一百万倍。这是摩尔定律的很多很多倍。如果您生活在一个指数世界中,您不希望信息一次从上到下一层传播。
Lauren Goode:但我问你,你的罗马帝国是什么?这是一个模因。今天的transformer paper是什么版本?现在正在发生什么你觉得会改变一切的事情?
黄仁勋:有几件事。其中之一并没有真正的名字,但它是我们在基础机器人领域所做的一些工作。如果你可以生成文本,如果你可以生成图像,你也可以生成运动吗?答案可能是肯定的。然后,如果您可以生成动作,您就可以理解意图并生成通用版本的清晰度。因此,人形机器人技术应该指日可待。
我认为围绕状态空间模型(SSM:state-space models)的工作可能是下一个transformer,它允许您学习极长的模式和序列,而无需在计算中呈二次方增长。
Lauren Goode:这能带来什么?现实生活中的例子是什么?
黄仁勋:您可以与计算机进行持续很长时间的对话,但上下文永远不会被忘记。您甚至可以暂时改变主题并回到之前的主题,并且可以保留该上下文。您也许能够理解极长链的序列,例如人类基因组。只需查看遗传密码,您就可以了解其含义。
Lauren Goode:我们距离这个目标还有多远?
黄仁勋:从我们有了 AlexNet 到超人的 AlexNet,只用了大约五年的时间。机器人基础模型可能即将出现——我会在明年的某个时候公布。从那时起,五年后,您将看到一些非常令人惊奇的事情。
Lauren Goode:哪个行业将从广泛训练的机器人行为模型中受益最多?
黄仁勋:嗯,重工业代表了世界上最大的工业。移动电子并不容易,但移动原子却极其困难。运输、物流、将重物从一个地方移动到另一个地方、发现下一种药物——所有这些都需要了解原子、分子和蛋白质。这些是人工智能尚未影响到的巨大而令人难以置信的行业。
Lauren Goode:你提到了摩尔定律。这个定律现在已经无关紧要了吗?
黄仁勋:摩尔定律现在更多地是一个系统问题,而不是一个芯片问题。更多的是关于多个芯片的互连性。大约 10、15 年前,我们开始了分解计算机的旅程,以便您可以将多个芯片连接在一起。
Lauren Goode:这就是你在 2019 年收购以色列公司 Mellanox 的初衷。Nvidia 当时表示,现代计算对数据中心提出了巨大的要求,而 Mellanox 的网络技术将使加速计算更加高效。
黄仁勋:对,完全正确。我们购买了 Mellanox,这样我们就可以扩展我们的芯片,将整个数据中心变成一个超级芯片,从而实现现代人工智能超级计算机。这实际上是为了认识到摩尔定律已经结束,如果我们想继续扩大计算规模,我们必须在数据中心规模上做到这一点。我们研究了摩尔定律的制定方式,然后说:“不要受其限制。摩尔定律并不是计算的限制。” 我们必须抛弃摩尔定律,这样我们才能考虑新的扩展方法。
Lauren Goode:Mellanox 现在被认为是 Nvidia 一次非常明智的收购。早两年,您试图收购全球最重要的芯片 IP 公司之一 Arm,但遭到监管机构的阻挠。
黄仁勋:那太好了!(That would’ve been wonderful!)
Lauren Goode:我不确定美国政府是否同意,但是是的,让我们确定这一点。当您现在考虑收购时,您会关注哪些具体领域?
黄仁勋:这些大型系统的操作系统极其复杂。如何在计算堆栈中创建一个操作系统,以协调 GPU 中数千万、数亿乃至数十亿个微型处理器?这是一个非常困难的问题。如果我们公司外部有团队这样做,我们可以与他们合作,或者我们可以做更多的事情。
Lauren Goode:你的言下之意是否代表着,对于 Nvidia 来说,拥有一个操作系统并将其构建成一个平台至关重要?
黄仁勋:我们已然是一家平台公司。
Lauren Goode:你越成为一个平台,你面临的问题就越多。人们往往会对平台的输出承担更多的责任。自动驾驶汽车的行为方式、医疗保健设备的误差幅度是多少、人工智能系统是否存在偏见。你如何解决这个问题?
黄仁勋:不过,我们不是一家应用程序公司。这可能是最简单的思考方式。我们将尽我们所能,但尽可能少地服务于一个行业。因此,就医疗保健而言,药物发现不是我们的专长,计算才是。制造汽车不是我们的专长,但为汽车制造极其擅长人工智能的计算机,才是我们的专长。坦率地说,一家公司很难擅长所有这些事情,但我们可以非常擅长其中的人工智能计算部分。
Lauren Goode:去年有报道称,您的一些客户为您的 AI GPU 等待了几个月。现在情况怎么样?
黄仁勋:嗯,我认为今年我们不会赶上供应。今年不会,明年也可能不会。(Well, I don’t think we’re going to catch up on supply this year. Not this year, and probably not next year.)
Lauren Goode:目前的等待时间是多少?
黄仁勋:我不知道现在的交货时间是多少。但是,你知道,今年对我们来说也是新一代的开始。
Lauren Goode:您是指 Blackwell,您传闻中的新 GPU 吗?
黄仁勋:是的,新一代 GPU 即将问世,Blackwell 的性能超乎想象。这将是令人难以置信的。
Lauren Goode:这是否意味着客户需要更少的 GPU?
黄仁勋:这就是目标。目标是极大地降低训练模型的成本。然后人们可以扩大他们想要训练的模型的规模。
Lauren Goode:英伟达投资了很多人工智能初创公司。去年有报道称,您投资了 30 多家初创公司。这些初创公司是否会在购买您的硬件时排长队?
黄仁勋:他们和大家一样面临着供应紧张的问题,因为他们大多数都使用公有云,所以他们不得不自己与公有云服务提供商进行谈判。不过,他们确实获得的是我们的人工智能技术,这意味着他们可以使用我们的工程能力和我们优化其人工智能模型的特殊技术。我们让他们变得更有效率。如果您的吞吐量增加五倍,您实际上会多获得五个 GPU。这就是他们从我们那里得到的。
Lauren Goode:在这方面你认为自己是一个造王者吗?
黄仁勋:不。我们投资这些公司是因为他们的工作令人难以置信。能够投资它们是我们的荣幸,而不是相反。他们是世界上一些最聪明的人。他们不需要我们来支持他们的信誉。
