昨晚,DeepSeek 無(wú)預(yù)警發(fā)布了 DeepSeek-V3-0324 模型。雖然官方低調(diào)地稱(chēng)其為“小版本迭代”,但實(shí)測(cè)表現(xiàn)遠(yuǎn)超預(yù)期。該模型在代碼生成、前端開(kāi)發(fā)等方面顯著提升,部分能力甚至比肩 Claude 3.7 Sonnet,引發(fā)了全球 AI 社區(qū)的熱議。
在大模型競(jìng)技場(chǎng)測(cè)試 KCORES 中,DeepSeek-V3-0324 的代碼能力得分為 328.3 分,超越了普通版 Claude 3.7 Sonnet 的 322.3 分,接近 Claude 3.7 Sonnet 思維鏈版本的 334.8 分。在 Aider LLM Leaderboard 排行榜中,DeepSeek-V3-0324 在多語(yǔ)言基準(zhǔn)測(cè)試中的得分為 55%,比 V3 有顯著提升,略低于 R1。在非思考/推理模型中,它排名第二,僅次于 Claude Sonnet 3.7。
測(cè)試數(shù)據(jù)還顯示,在表現(xiàn)良好的模型中,DeepSeek-V3-0324 的花費(fèi)最低,比 R1 低很多,僅需約 1/5 的成本,具有極高的性價(jià)比。Claude Sonnet 3.7 Thinking 的花費(fèi)是 DeepSeek-V3-0324 的 33 倍,o1 則是其 167 倍。
目前在 DeepSeek 官網(wǎng)上,只需關(guān)閉“深度思考”選項(xiàng)即可使用新模型。Hugging Face 上也提供了開(kāi)源下載。DeepSeek-V3-0324 包含 685B 參數(shù),較前代 V3 小幅增加,采用 MoE(專(zhuān)家混合)架構(gòu),激活參數(shù) 370 億。網(wǎng)友實(shí)測(cè) DeepSeek-V3-0324 支持 4-bit 量化,可在 512GB M3 Ultra Mac 上以 20+ token/s 速度運(yùn)行,磁盤(pán)占用僅 352GB。新模型采用與 DeepSeek-R1 相同的 MIT 許可,允許自由修改、商用及模型蒸餾,比上一版 V3 更開(kāi)放。
從測(cè)評(píng)結(jié)果來(lái)看,DeepSeek-V3-0324 在前端開(kāi)發(fā)方面表現(xiàn)突出,媲美頂級(jí)商業(yè)模型。X 博主 Deepanshu Sharma 使用簡(jiǎn)單提示詞“用 HTML/CSS/JS 制作現(xiàn)代化登錄頁(yè)面”,就能讓新版 V3 一鍵生成 800 多行代碼,并且無(wú)錯(cuò)誤運(yùn)行,效果堪比 Claude 3.7 Sonnet。在經(jīng)典彈跳小球測(cè)試中,DeepSeek V3-0324 不僅比 R1 表現(xiàn)更好,還生成了最流暢的動(dòng)作。o3-mini 初始表現(xiàn)良好,但未能正確遵循物理原理,特別是在視頻中間,球?qū)χ亓](méi)有做出正確的反應(yīng)。Deepanshu Sharma 評(píng)價(jià) DeepSeek V3-0324“表現(xiàn)得像唯一排名第一的非推理模型”。