全球首富、知名创业家马斯克(Elon Musk)确认,xAI次世代大型语言模型(LLM)“Grok 3”即将问世。
马斯克6日在社交平台X表示,Grok 3已完成预训练(Pretraining)即将发布,算力比Grok 2高十倍多。
Cool!
And Grok 3 is coming soon. Pretraining is now complete with 10X more compute than Grok 2.https://t.co/54j81EEOF5
— Elon Musk (@elonmusk)January 4, 2025
Tom′s Hardware 6日报道,从时间和脉络看,确认xAI打造Colossus超级计算机是为了加速推进大规模AI项目。马斯克提到Grok 3算力“比Grok 2高十倍”,进一步证明Grok 3运用Colossus这个庞大运算建设进行预训练。Grok 3使用X用户数据。
xAI计划一段时间后部署超过100万颗GPU支持的超级计算机。这版Colossus将训练涵盖数兆参数的大型语言模型,届时远比Grok 3或GPT-4o准确。除了更庞大参数,新模型也许会具备更先进推论能力,朝通用人工智能(artificial general intelligence,AGI,指等于或超越人类的AI)靠拢。
(首图来源:xAI)