根据外媒报道,马斯克近日向投资者透露,他创办的AI公司xAI计划建造超级计算能力工厂(Gigafactory of Compute),为下一代AI聊天机器人Grok提供计算能力支持。该超级计算机计划连接10万元英伟达H1000 GPU。

建成后,这台超级计算机的规模将至少是目前最大GPU集群的四倍。例如,Meta是由英伟达的6000多个A100组成的集群,用于训练其AI模型。 GPU构成。在马斯克此举的背后,英伟达可能会成为最大的赢家。在最新的季度报告中,英伟达还宣布将在世界范围内增加9个新的Grace。 超级计算机的HopPEr芯片。

突然放出“超级大招”的马斯克  第1张

Grok用于超级计算机或训练 3

马斯克说,他希望超级计算机在2025年秋天之前运行,并补充说xAI可以与甲骨文合作开发这台大型计算机。xAI是甲骨文中H100芯片服务器最大的租客,后者已经使用了15000多个H100芯片。

去年7月,马斯克成立了XAI,专注于人工智能业务,旨在挑战OpenAI和谷歌的微软支持。去年11月,XAI推出了第一款AI大型聊天机器人Grok,可以实时连接到其名下的社交媒体平台X。

现在,Grok的最新版本是3月底发布的Grok。 本版本实现了长上下文理解和高级推理能力,可处理128K。 长上下文的token窗口。xAI官方博客表示:“提高我们的多模态理解和生成能力是构建能够理解世界的AGI(通用人工智能)的重要一步。在接下来的几个月里,我们预计这两种功能将在图像、音频和视频等多模式中得到重大改进。”

此前,马斯克透露,Grok正在训练xAI。 已消耗了大约20,000个H100 GPU,由于芯片短缺,训练过程一度受阻,预计今年5月完成训练。Grok未来高级版 H1000可能需要高达10万元。 GPU。

许多AI巨头寻求建造超级计算机

3月底,有消息称,微软和OpenAI正在计划一个数据中心项目,该项目将包括一台拥有数百万专用服务器芯片的超级计算机,以支持OpenAI的人工智能技术。AI超级计算机的成本可能高达1000亿美元,包括一台名为Stargate的AI超级计算机,预计将于2028年启动。微软很可能负责资助这个项目。

Meta和英伟达于2022年初发布了一台大型AI研究超级计算机,它与6080个A100相连。 GPU,AI计算性能可提供500亿次。经过全面部署,这台超级计算机成为最大的英伟达DGX A100客户系统,用于训练AI模型,参数超过10,000亿。

由特斯拉自主研发的D1芯片组成的马斯克特斯拉还建立了一个超级计算机Dojo,用于服务其自动驾驶业务。此前,特斯拉发布的计算能力计划显示,Dojo于2023年7月正式投产。随后,特斯拉的计算能力将进入快速增长期,2024年2月进入世界前五,10月达到100EFLOPS,相当于30万英伟达A100。 GPU的计算能力总和。

建造超级计算机需要大量投资。近日,外媒报道称,据一位知情人士透露,xAI预计将于6月完成一轮融资,包括最新注入的现金。这一轮融资可能会让公司估值超过240亿美元。

在与OpenAI的竞争中,xAI也宣传它可以利用马斯克社交平台X的高质量数据,这对于训练大语言模型非常重要。

英伟达或者成为最大的赢家

马斯克打造的超级计算机计划连接10万元英伟达H1000元。 GPU,英伟达或者成为最大的赢家。

根据英伟达的最新财务报告数据,该公司在第一财季(截至2024年4月28日)实现了260亿美元的营收,同比增长262%。;同比增长628%,净利润148.1亿美元。

其中,英伟达数据中心在第一财季的收入创下225.63亿美元的纪录,比上一季度增长23%,同比增长427%。英伟达还在季度报告中宣布,世界将新增9台使用其Grace。 超级计算机,Hopper超级芯片。

美东时间周四,英伟达股价再次创下历史新高,总市值达到2.56万亿美元(约18.54万亿元人民币),超过了德国首家上市公司的总市值。

在全球最节能的超级计算机Green500榜单中,前三名的超级计算机都是基于英伟达Graceen500的新名单。 创建Hopper。排名前十的超级计算机中,有7台采用了英伟达技术;前50名中有40台采用了英伟达技术。

英伟达还表达了对xAI的认可和支持。科莱特·克雷斯,英伟达首席财务官(Colette Kress)在提到第一批体验英伟达下一代旗舰芯片Blackwell的客户名单时,特别提到了xAI。OpenAI也包含在这份名单中。、行业巨头,如亚马逊,谷歌。

编辑:王时丹 | 审核:李震 | 审判:万军伟

(来源:上海证券报)