马斯克自曝训练Grok3用了10万块NV H100:花了300亿
马斯克已经宣布其人工智能初创公司xAI的大语言模型Grok-2将于8月推出,将带来更先进的AI功能。虽然Grok-2还没亮相,但马斯克已经开始为其Grok-3进行造势。
马斯克表示,训练AI聊天机器人需要数据集,而且从现有数据中清除大型语言模型 (LMM) 的工作量很大。他还谈到了OpenAI模型输出训练的几个问题。
他透露xAI的Grok-3用了10万块英伟达H100芯片进行训练,预计将于年底发布,相信它会“非常特别”。
H100芯片是英伟达专为处理大型语言模型数据而开发的人工智能芯片,每块价格约在3-4万美元之间,简单计算的话,这些芯片的价值就高达30亿-40亿美元(约合290亿元人民币)了。
热门相关:如意小郎君 极品医圣 田园晚色:肥妇三嫁良夫 学霸,你女朋友掉了 傲天弃少