馬斯克掀桌子了,最強開源大模型誕生 Grok-2震撼發(fā)布!馬斯克終于開源了Grok-2。xAI正式宣布向所有人開放Grok-2,并預告Grok-3將在6個月后開源。Grok-2于2024年完成訓練,體積超過500GB,其混合專家架構在Grok-1的基礎上進行了改進。
此次開源的核心部分包括模型權重和架構。Grok-2的技術特點十分突出:總參數量高達9050億,在推理時每次激活其中的1360億參數,使其成為目前最強大的開源模型之一。它支持高達131,072 token的上下文長度,能夠一次性處理非常長的文檔或對話歷史。此外,Grok-2采用混合專家架構,可以在不增加巨大計算成本的前提下大幅擴展模型規(guī)模,提升模型能力。預訓練數據覆蓋了大量的文本和代碼,截至2024年初。
關于開源權限,商業(yè)用途有一定門檻:只有當關聯(lián)公司年收入低于一百萬美元時,才可用于商業(yè)用途;超過此門檻的商業(yè)用途需獲得xAI的單獨許可。除非協(xié)議條款允許對Grok 2進行修改或微調,否則不得使用材料、衍生品或輸出來訓練、創(chuàng)建或改進任何基礎、大型語言或通用人工智能模型。
Grok-2現(xiàn)已正式開源,用戶可在Hugging Face上下載。下載方法是通過SGLang部署,下載權重文件。如果下載成功,該文件夾下應包含42個文件,總大小約為500GB。啟動服務器需要安裝最新版的SGLang推理引擎(版本≥v0.5.1),并使用特定命令啟動推理服務器。這個配置需要8張GPU(每張顯存大于40GB)。發(fā)送請求時,需要使用正確的對話模板。
網友XFreeze表示,xAI的發(fā)展速度驚人。他透露,xAI位于孟菲斯的巨像數據中心僅用122天建成并全面投入運營,配備100,000塊英偉達H100 GPU。短短兩年內,xAI憑借Grok 4的發(fā)布,以極其精簡的團隊登頂全球最強人工智能之巔。黃仁勛曾稱這是“超人”之舉,只有馬斯克能做到。有網友贊美馬斯克和xAI正以光速推動AI的進步,并預告Grok 5訓練即將開始。還有網友感嘆,這一切就像在實時觀看一個科幻夢想成真。Grok 4發(fā)布會上,馬斯克預告了下一步路線圖:8月將發(fā)布編碼模型,9月發(fā)布多模態(tài)智能體,10月發(fā)布視頻生成模型。預計5年內,xAI將打造出5000塊H100巨無霸超算。馬斯克自信滿滿地表示,xAI很快就能超越谷歌以外的所有對手,甚至超越谷歌也只是時間問題。
近日,四川發(fā)生了一起因家庭瑣事引發(fā)的激烈沖突。一名女子在精心準備飯菜招待娘家侄子后,因丈夫未吃到雞蛋而不斷抱怨,最終情緒崩潰掀翻了餐桌,此事在網絡上引發(fā)了廣泛關注和熱議
2025-08-08 08:47:28女子因丈夫喋喋不休掀桌子新能源汽車市場競爭激烈,蔚來創(chuàng)始人李斌終于迎來了一個好消息
2025-08-04 07:51:03樂道L90爆單