今天小編分享的科技經驗:8分鍾,Grok 3破解美國大學生最難數賽題!馬斯克要用100萬GPU反超「星際之門」?,歡迎閲讀。
【新智元導讀】馬斯克旗下 xAI 擴張步伐不停!繼孟菲斯後,xAI 在亞特蘭大的秘密數據中心浮出水面。海量英偉達 GPU 集結,這背後是 Grok 3 用户激增的壓力,還是馬斯克挑戰 OpenAI、谷歌的雄心壯志?甚至是超越「星際之門計劃」的野心。
上周,馬斯克發布了其号稱「地表最強」的 Grok 3 模型。
一經發布便引爆全網,經過網友實測,發現其性能果然強悍!
物理學家 Luis Batalha 在 x 上表示,2025 年的普特南競賽上,即使是前 500 名的頂尖選手,也無人能完整攻克下面這道難題。而 Grok 3(Think)僅用了約 8 分鍾就找到了答案。
不只是解數學題,計算機博士 Alvaro Cintas 稱 Grok 3 是一款令人難以置信的 AI 編碼助手。
他在只用了幾個小時,就用 Grok 3 寫了超過 1000 行代碼,做出了一個功能齊全的 2D 垂直跳躍遊戲。
該遊戲擁有不同的英雄、怪物、平台、難度和生命。以下是他的提示和遊戲畫面,可以看出遊戲制作得非常精美!
的确,由于 Grok 3 性能過于強悍,大量用户正在抛棄 ChatGPT 并轉投 Grok 3。
網友調侃説,他妻子嫉妒 Grok 3,因為他跟 Grok 3 説的話比跟他妻子還多。
23 号,知名 AI 投資人 The AI Investor 在 x 上預測,幾天後,馬斯克會發布一些關于 Grok 3 使用量的統計數據。
由于用户的瘋狂湧入,馬斯克很可能得出結論,現在的 20 萬個 GPU 集群遠遠不能滿足需求。
也許 xAI 的百萬級 GPU 集群正在形成中。
在發布 Grok 3 時,馬斯克闡述了 xAI 在将其大規模 GPU 集群(包含 20 萬個英偉達 GPU)進行擴容時所遇到的工程難題。并表示他們計劃将該集群擴容至 100 萬個 GPU 的規模。
對此消息,網友紛紛表示「利好英偉達」。
甚至有網友認為,xAI 的數據中心規模将會大于 Stargate 項目所宣稱的。
超越「星際之門計劃」?
就在上個月,特朗普剛剛正式官宣「星際之門計劃」,号稱要在未來 4 年内砸 5000 億美金,重塑美國在 AI 界領導地位。
這項計劃将由 OpenAI、軟銀、甲骨文牽頭,首期先部署 1000 億美元。紐 * 約時報稱,首批 10 座數據中心目前已在得克薩斯州開建,未來将擴展到其他州。
此前,奧特曼提到的「已經在建設中」的星際之門計劃園區,即為 Oracle/Crusoe 阿比林園區。
該園區将容納供 OpenAI 使用的 10 萬台 GB200 算力集群。這個開發項目以及計劃在第二季度和第三季度交付的 GB200 伺服器,将部署在 Oracle/Crusoe 的數據中心内。
下面是 2024 年 12 月 29 日,拍攝的園區高清照片。
4 個約 11,150 平方米的「模塊」組成了一棟 44,600 平方米的建築,目前僅有兩棟建築在建,關鍵 IT 負載容量約為 180 兆瓦。為了讓大家理解這一規模,整個由 20 棟建築組成的園區将包含 80 個這樣的「模塊」!
除了正在部署的 10 萬台 GB200 算力集群外,分析師估計,他們還将在整個園區部署另外 20 萬台 GB300 和約 40 萬台 VR200(英偉達計劃在 2026 年推出的超算,分别對應 Vera CPU 和 Rubin GPU)。
他們根據園區 1,000 億美元總擁有成本(TCO)投資,以及人工智能 TCO 模型中的部門成本,計算出了 Vera Rubin 處理器的隐含數量。
約 70 萬台 GPU 的總 IT 功率為 1.8GW,這與 Oracle/Crusoe 阿比林園區 1,800 兆瓦的容量相符。
OpenAI 研究員稱「星際之門」将是有史以來最大的基礎設施投資之一,将為 AGI 創造計算和能源。其規模已經可以與阿波羅計劃和曼哈頓計劃相媲美。
不過在這項目标遠大的規劃中,并沒有看到馬斯克的 xAI 參與其中。
也許老馬有他自己的小算盤。當人們還在熱議 xAI 孟菲斯數據中心的「全球最大」稱号時,馬斯克已經在亞特蘭大悄然布下另一顆棋子。
馬斯克低調開建 xAI 第二個超算中心
在亞特蘭大,xAI 一直在悄悄地建立數據中心(與 X 共同運營),将其業務版圖擴展到其在孟菲斯的大型數據中心之外。
根據與亞特蘭大經濟發展機構之一 Develop Fulton 籤署的協定中列出的設備清單,兩家公司将共同部署約 12,000 個英偉達 GPU,其中大部分将被用于 AI 計算。
對此,Develop Fulton 制定了一個市政債券融資方案,為這個單一設施中價值 7 億美元的芯片、線纜和其他設備提供融資。
其中,4.42 億美元分配給 X,2.58 億美元給 xAI。
内部詳情
知情的數據中心解決方案架構師和 AI 硬體專家表示,亞特蘭大數據中心擁有相當可觀的計算能力。其規模可與谷歌或亞馬遜等超大規模科技企業建立的數據中心相媲美。
X 的代表将其描述為一個能夠計算「萬億參數 AI」的百億億次級(exascale)數據中心。
但與 xAI 綽号為 Colossus(巨人)的「世界最大超算」相比,這個設施的容量就顯得小了很多。
根據檔案顯示,佐治亞州設施将安裝約 12,448 個英偉達 GPU。其中絕大多數是 Hopper 架構的 H100 GPU,每個伺服器機架(含 8 枚芯片)的價格在 27.7 萬至 50 萬美元之間。
約 3% 的芯片是英偉達性能較低的 A100 GPU,同樣配置的 8 枚芯片價格為 14.7 萬美元。其中,X 提供了所有的 A100,以及 11,000 個 H100。
這兩種芯片設計都不需要液冷系統,而液冷一直是馬斯克公司在孟菲斯面臨的一個棘手問題。當全負載運行時,Colossus 項目預計将成為該市最大的用水消費者之一。
除了 H100 芯片外,xAI 還提供了同樣購自英偉達的 Mellanox 交換機和光學器件——這些高帶寬網絡設備可以提升芯片間的協同運算速度。
據估計,亞特蘭大設施将需要 20 兆瓦的總功率,這一用電量可以從現有電網獲得。
X 和 xAI 的合作
亞特蘭大設施是馬斯克整合資源打造 X 和 xAI 的典型案例。其中,X 為該數據中心貢獻了 90% 的硬體,而 xAI 貢獻了 10%。
根據檔案顯示,這些設備将用于訓練 X 平台的大語言模型和語義搜索產品。LinkedIn 資料顯示,X 在該地區擁有約 16 名員工。
根據公司内部組織架構圖,xAI 在佐治亞州設施配備了 1 名員工,另有 2 名員工被列為「X Corp 合作夥伴」。
與 Develop Fulton 達成的協定顯示,該設施将保持現有的 24 個工作崗位,暫不增加新崗位。
馬斯克正努力将 xAI 打造成能夠與 OpenAI 和谷歌等科技巨頭抗衡的主要競争者,甚至從特斯拉挖來了一些人才。
據此前報道,在過去一年中,公司已招募了數百名數據标注人員來訓練其聊天機器人,并計劃在未來幾個月内将招聘規模擴大到數千人。