← 返回 AI 資訊

#MoE

共 5 篇文章

模型發布

美團上架 LongCat-2.5:1.6T 原生多模態代理模型,以 $1.20/百萬 tokens 打進長程 Agent 戰場

美團於 11 月 2 日發布 LongCat-2.5,一款 1.6 兆參數、約 48B 活躍參數的原生多模態 MoE 代理模型,支援 1M-token 上下文與 OpenAI/Anthropic 雙協定 API,輸出定價僅 $1.20/百萬 tokens。模型在長期 RL 下強化視覺編碼與視覺編程,並於國產加速器上以 W4A4 量化訓練與推理——但權重未開放,標誌 LongCat 從開放權重轉向 API 優先的商業化路線。

模型發布

Mistral 開源 1 兆參數模型 Large 4(Le Chonk):歐洲開放權重的前緣之爭

Mistral 於 10 月 29 日釋出旗艦模型 Mistral Large 4(Le Chonk)的開放權重——一款約 1 兆參數、原生多模態的 MoE 模型。歷經三週額外強化學習後,其 Terminal-Bench 4.0 得分由預覽版的 28% 升至 41%,並在 Coding Agent Index 上以少 47% 的 token 與中國開放模型 GLM-5.3 打成平手。此舉標誌歐洲在「主權 AI」與開放權重競賽中正式站上前線,也為企業提供可自託管的前緣級模型新選擇。

模型發布

NVIDIA Nemotron 3.5 Bolt 74B 發布:以 2-bit 量化 MoE 推動本地代理運算

NVIDIA 於 10 月 15 日正式發布 Nemotron 3.5 Bolt 74B-A9B:一款 74B 總參數、9B 活躍參數的 MoE 模型,以 2-bit 量化與量化感知訓練壓縮至 24GB,專為 RTX Spark 筆電上的本地 AI 代理設計,並完整開源權重、訓練數據與配方。此舉是 NVIDIA 把代理工作負載從雲端推向終端設備的關鍵一步,也將本地推論的性價比之爭推向新階段。

模型發布

Reflection AI 發布 Beam:501B 開放權重 MoE 模型挑戰中國開源前緣

Nvidia 支持的 Reflection AI 於 10 月 5 日正式推出首款開放權重模型 Beam——501B 總參數、23B 活躍參數的稀疏 MoE 模型,以 Apache 2.0 授權發布。Beam 在推理、編程與代理任務上匹配 GLM-5.2 水準,但推論計算成本僅為後者的 1/3 至 1/4,標誌著西方開放權重陣營對中國開源模型的一次重要回應。