我巴望活下去的毅力，超越简直所有人想要杀死我的毅力。——黄仁勋
“这不是演唱会，你们是来参与开发者大会的！”今日清晨4点，黄仁勋进场时，现场爆宣布巨大的欢呼声。
当地时刻2024年3月18日，黄仁勋在英男人天堂网夜色99视频 GTC 大会宣布主题讲演
“通用核算现已失掉动力，现在咱们需求更大的模型，咱们需求更大的 GPU，更需求将 GPU 堆叠在一起”，黄仁勋在英男人天堂网夜色99视频 GTC 大会上说道。大模型参数量正在呈指数级增加，此前 OpenAI 最大的模型现已有 1.8T 参数，需求吞吐数十亿 token。即使是一块 PetaFLOP 级的 GPU，练习这样大的模型也需求 1000 年才干完结。
全球的科技公司争抢 H100 芯片的气势于 2023 年年末开端有所削弱，但新一代“强心剂”已来。 英男人天堂网夜色99视频推出新一代的 AI 芯片 “Blackwell”，“这是块十分十分大的GPU”。英男人天堂网夜色99视频在发布会上表明，相较于之前的 H100 芯片，GB200 超级芯片能够为大言语模型（LLM）推理负载供给 30 倍的功用进步，并将本钱和能耗下降 25 倍。
Blackwell的发布意味着，近8年来，AI算力增加了一千倍
人们现已发现：将深度学习运用到许多范畴的科技公司，简直每一个都是在英男人天堂网夜色99视频的渠道上构建的。一位华尔街分析师对此表明：“人工智能范畴正在进行一场战役，而英男人天堂网夜色99视频是仅有的军火商”。华尔街的追捧在2023年-2024之间上升到极致。短短八九个月，英男人天堂网夜色99视频的市值从万亿美元飙升到两万亿美元。现在，英男人天堂网夜色99视频现已成为全球市值第三大的公司，仅次于微柔和苹果。
不过，这家看似新锐的科技公司，现已走过了 30 年进程，几经浮沉。
现在，英男人天堂网夜色99视频的产品仍然处于求过于供状况。在此布景下，英男人天堂网夜色99视频毛利率拉至 60% 左右。在比年寻觅新技能打破的大额开销之下，任何一家科技公司，想要坚持这样的成绩单，都是难能可贵的。
GPU ，英男人天堂网夜色99视频的代名词
故事要从 20 世纪 90 年代说起。
其时，硅谷已有人提出，能够经过声卡、网卡这些功用指定的芯片，来下降 CPU（中央处理器）的作业负载。所以同理，做一张专门操控电脑图画输出的芯片，即显卡（Graphic Card），也是自然而然的。例如索尼在 1994 年年末推出的游戏机 PlayStation 就运用了显卡。
但显卡的技能途径，在其时有许多，英男人天堂网夜色99视频找到的切入点是经过并行核算，完成 3D 图形加快，特别在游戏范畴上进行运用。
1999 年，英男人天堂网夜色99视频推出了一款名为 GeForce 的显卡。
这款被冠以“全球首款 GPU”的图形处理器，采用了 220 纳米制造工艺，现在英男人天堂网夜色99视频 H100 所运用的制造工艺已到了 4 纳米。
GeForce 最大的亮点是“并行核算”，即把一个杂乱的使命拆分红小核算，然后一起处理它们。这与中央处理器 CPU（central processing unit）有着明显不同，在规范的核算机架构中，CPU 一次能处理一个问题。如果说把通用的 CPU 比作一辆卡车，一次运送一个大包裹到一个目的地；那么 GeForce 则像是在一组摩托车车队，能够一起运送多个小包裹到多个目的地。
彼时，研讨 GPU 的公司，不只英男人天堂网夜色99视频一家，但英男人天堂网夜色99视频成功做到了将自己与“GPU 发明者”这个标签深度绑定。
其时，英男人天堂网夜色99视频商场营销担任人 Dan Vivoli 用 “graphics processing unit”（图形处理器）的概念来推行自家的芯片。比较英特尔靠 CPU 来叱咤芯片商场，英男人天堂网夜色99视频需求营销 GPU 来为自己杀出一条血路。仅仅 Dan Vivoli 以为，英男人天堂网夜色99视频着重自己的 GPU 发明者的身份后，“咱们能成为职业领导者”，他彻底没有想到，GPU 将在很长一段时刻内成为英男人天堂网夜色99视频的代名词，并且在十多年后，成功掀起人工智能职业的风暴。
英男人天堂网夜色99视频死磕“不流畅旮旯”
时刻回到 1999 年，GeForce 显卡很受商场欢迎。其时有一款名为 Quake 的视频游戏，便是运用这款显卡经过并行核算烘托画面——用榴弹射击怪物。PC 玩家为了赢得游戏，晋级时都会购买新的 GeForce 显卡。
后来，英男人天堂网夜色99视频发动超级核算渠道 CUDA的开发。黄仁勋期望，CUDA 能在每一张 GeForce 显卡工作。CUDA 最总算 2006 年发布，但在其时，英男人天堂网夜色99视频彻底没有感动国际，“人们好像彻底不需求它”，反而因为打造领先于年代的“超级核算”体系，英男人天堂网夜色99视频的赢利遭到大幅减少，华尔街为此嘘声一片。
一档风行硅谷的抢手播客《Acquired》的主持人 Ben Gilbert 对此点评：“他们其时瞄准的不是一个大商场，而是一个学术和科学核算的不流畅旮旯，但他们为此花了数十亿美元”。
到 2008 年末，叠加金融危机影响，英男人天堂网夜色99视频股价已跌落 7 成。
来自外界的声响并未过分影响黄仁勋。刚转学到美国时，黄仁勋进入了一所“特别学校”，“每个学生都抽烟，我觉得我是学校里仅有没有口袋刀的男孩”，学校霸凌也很遍及，黄仁勋每天都会被叫做我国佬。这段阅历教会了黄仁勋在杂乱、多变环境中怎么寻求资源、“存活”下来：“没有心思辅导员能够倾吐，你只能变得刚强，然后持续前行”。彼时，黄仁勋经过教数学、带着同学们树林探险等方法跟当地的同学打成了一片。
何况，黄仁勋仍然对 CUDA 充满信心。他曾共享了这样一段故事：台湾大学物理教授 Ting-Wai Chiu 的办公室地板上，堆满了 GeForce 盒子，办公室开着一般电扇对其进行冷却——Ting-Wai Chiu 为了模仿大爆炸后物质的演化，依托 GeForce 和 CUDA，建立了一个克己的超级核算机。
可是，像 Ting-Wai Chiu 这样的人并不是大多数，CUDA 的下载量在 2009 年到达峰值后，接连三年下降。董事会忧虑英男人天堂网夜色99视频持续低迷的股价，会给急进的股东割裂公司的时机。
那么，推行 CUDA 成为眼下有必要做的事。
英男人天堂网夜色99视频首要挑选了高校道路——从全球尖端研讨机构和大学协作，用 CUDA 赋能科研，“从下一代进行遍及和培育”。时至今日，在硅谷的一般聚会上，你能发现：许多刚结业于美国高校、供职于大型科技公司的工程师们都学过 CUDA。
此外，英男人天堂网夜色99视频还测验在各行各业中寻觅 CUDA 的运用场景，他们测验在股票交易、石油勘探、分子生物等范畴有所作为。乃至为推行 CUDA，英男人天堂网夜色99视频还与通用磨坊 （General Mills）签订协议，模仿冷冻披萨的热物理学进程。
不过，英男人天堂网夜色99视频并未在人工智能范畴考虑太多，其时好像商场需求不大。
游戏显卡商成 AI 军火商
那么问题来了，为什么担任进步游戏画质的显卡，会忽然成为 AI 职业的重要根底硬件？要知道，直到 2022 财年，游戏都是英男人天堂网夜色99视频无可置疑的第一大事务。
咱们仍然要将故事时刻回拨，回到二十一世纪初。彼时，人工智能仍是一个边缘学科。该学科在图画辨认和语音辨认方面有所发展，但也断断续续。
在其时，“神经网络”（一种受人脑结构启发来解决问题的核算结构）遍及被以为是过期的、不起作用的。但仍有一些研讨团队在这一范畴测验，多伦多大学的教授 Geoffrey Hinton 便是其中之一。
2009 年，Hinton 的团队运用英男人天堂网夜色99视频的 CUDA 渠道练习了一个神经网络模型，用来辨认人类语音，效果出奇的好。他在同年晚些的一次会议上展现了这些效果，然后 Hinton 发了一封邮件联络英男人天堂网夜色99视频，“看，我刚刚告知一千名机器学习研讨人员他们应该去买英男人天堂网夜色99视频的卡。你们能免费给我寄一张吗？”，英男人天堂网夜色99视频的答复是“不可”。
不过即使没有要到免费的显卡，Hinton 仍是鼓舞学生运用 CUDA。2012 年，他的学生 Alex Krizhevsky 和 Ilya Sutskever（后者是 OpenAI 的创始人之一），开端在英男人天堂网夜色99视频的 CUDA 渠道上练习一个视觉辨认神经网络。因为预算有限，他们只在亚马逊上买了两张 GeForce 卡。短短一周，Alex 就向其投喂了数百万张图画。“他的卧室里两个 GPU 飞速工作”，Hinton 说，“实际上，他爸爸妈妈支付了相当可观的电费”。
Krizhevsky 和 Sutskever 对这些显卡的才能感到吃惊。在同年早些时候，谷歌的研讨人员练习了一个辨认猫视频的神经网络，这需求大约一万六千个 CPU。Krizhevsky 和 Sutskever 只用了两张 GeForce 卡就取得了国际级的效果。Sutskever 对此表明：“GPU 的呈现，就像奇观”。
Krizhevsky 和 Sutskever 将他们练习出的神经网络命名为 AlexNet。这一模型在年度 ImageNet 视觉辨认竞赛中大放异彩，以至于竞赛安排方置疑是否存在做弊行为。
这是一个巨大时刻，范式转变了。Krizhevsky 在其对 AlexNet 架构的 9 页描绘中指出：与 CPU 比，专用的 GPU 能够将神经网络的练习速度进步 100 倍。
至此，黄仁勋彻底调转了公司方向。2023年的一篇文章泄漏，他在一个周五晚上发送邮件，称“全部都将转向深度学习，咱们不再是一家图形公司”，到下周一早上，英男人天堂网夜色99视频现已成了一家当之无愧的人工智能公司。
与此一起，黄仁勋找到英男人天堂网夜色99视频最优异的 AI 研讨员 Catanzaro，让其幻想现在英男人天堂网夜色99视频的八千职工全数在停车场， Catanzaro 能够挑任何人参加自己的团队。
后来，人工智能范畴开端涌入风投资金。人们很快发现：将深度学习运用到许多范畴的草创公司，简直每一个都是在英男人天堂网夜色99视频的渠道上构建的。
2016 年，英男人天堂网夜色99视频向 OpenAI 的一个研讨小组交付了第一台专用的人工智能超级核算机 DGX-1。黄仁勋自己亲身将这台核算机送到了 OpenAI 的办公室，其时的董事长埃隆·马斯克用开箱刀打开了包裹。
英男人天堂网夜色99视频向 OpenAI 交付了第一台专用的人工智能超级核算机。
然后，OpenAI 经过英男人天堂网夜色99视频的超级核算机练习出了风行全球的 ChatGPT。英男人天堂网夜色99视频后续更新的硬件产品 DGX H100 遭到商场疯抢，求过于供。
从芯片供货商到渠道供货商
今日清晨的这场发布会上，黄仁勋还有一句话值得留心：“Blackwell 不仅是一款芯片，也是一个渠道的称号。”
怎么了解渠道这个词？相似于之前 Geforce 显卡和 CUDA 超级核算渠道的调配，英男人天堂网夜色99视频在此次推出的也是一整个打包计划，英男人天堂网夜色99视频逐步转型成相似微软或苹果的渠道供给商，其他公司能够在这个渠道上构建软件。
黄仁勋在发布会上，用了相当多的时刻，介绍了英男人天堂网夜色99视频供给的若干个企业级生成式 AI 微服务，并表明“公司们能够凭借这些服务制造运用程序，并且具有其知识产权的彻底所有权和操控权”。
而英男人天堂网夜色99视频从芯片供货商转向渠道供货商的背面，其实和英男人天堂网夜色99视频的竞赛对手有关，乃至许多旧日客户也变成了对手。
首要，一些人工智能渠道如微软、谷歌、Meta 等，出于规划和本钱的考虑，正在考虑自己开发芯片。例如谷歌研制的 TPU 现已更新到第五代，这款芯片为机器学习量身定制，其推理功用进步 2.5 倍，本钱下降 50%。
再比方微软于 2013 年 11 月推出两款芯片（Azure Maia 100 人工智能加快器和 Azure Cobalt 100 中央处理器），针对人工智能、生成式人工智能和云核算进行了优化，将在人工智能图形处理部分与英男人天堂网夜色99视频直接竞赛。
而这些公司，正是英男人天堂网夜色99视频一直以来的首要 GPU 芯片客户。
其次，一些英男人天堂网夜色99视频的老对手也在发力 AI 芯片。 AMD 于 2023 年 12 月，推出 AI 芯片 MI300X，正式与英男人天堂网夜色99视频叫板。与英男人天堂网夜色99视频的 H100 比较，这款芯片在多个维度有 1.3 倍乃至 2 倍的数据进步，Meta、微软、甲骨文等公司也已下单。
除了老对手外，因为美国政府的技能出口禁令，促进我国在人工智能芯片方面走向自给自足，华为已成为英男人天堂网夜色99视频又一个值得注意的对手。在英男人天堂网夜色99视频最新的年报里，这样描绘了它眼中的竞赛对手。
眼下，黄仁勋现已成为硅谷任职时刻最长的 CEO 之一，30 岁创建英男人天堂网夜色99视频，30 年创业进程，他要么为“食物”奔波，要么想办法不被吃掉。
他也不知道自己还能再干多久。黄仁勋挑选用一个戏谑的笑话完毕了这个问题：
“或许 30 年后，我变成了机器人，那我还能持续 30 年”。
