MoE
11 則報導橫跨 9 期2026-08-06 起
2026-10-08Reddit r/LocalLLaMA
llama.cpp 提交 PR 為主機記憶體中的 MoE 專家新增 GPU 快取,有望提升 VRAM 不足時的推論速度
2026-09-29Reddit r/LocalLLaMA
社群熱議 ToMoE v2 論文:探討將密集模型近乎無損轉換為 MoE 模型
2026-09-23Reddit r/LocalLLaMA
據 Reddit 曝光 mini-AGI 專案:採動態循環 Transformer 與演化生長機制,預計達 GPT-2 等級後開源
2026-09-19Reddit r/LocalLLaMA
開源推理引擎 Flyweight 發布:單 GPU 結合系統 RAM 運行大型 MoE 模型,支援動態記憶體分配
2026-09-18Hacker News
研究提出 Infinite-Parameter LLM 架構:以超網路將即時互動數據動態轉為模型權重
2026-09-02AI 科技評論
DeepSeek V4 開源多模態模型權重,揭露 32 層 ViT 與專屬 MoE 視覺路由機制
2026-08-28Reddit r/LocalLLaMA
Qwen 3.8 Flash Next 架構解析:結合 N-gram 與 512 專家 MoE,將 51B 參數卸載至 SSD
2026-08-10Reddit r/LocalLLaMA
開發者分享 32GB 記憶體運行 DSv4 300B MoE 實測:透過重新打包與推測預取克服讀取瓶頸
2026-08-06Reddit r/LocalLLaMA
Cursor 開源 B200 專用 MoE 訓練 megakernel,宣稱端到端加速達 40%
2026-08-06InfoQ 中國
螞蟻集團解析 Ming-flash-omni 全模態模型:2.0 版達千億參數,首創 AnyExperts 動態分配 MoE 專家
2026-08-06量子位