Engram 嵌入双关：面向高效 DRAM/SSD 卸载的协同设计

SemiAnalysis 复现了 DeepSeek 的 Engram 架构，在 fineweb-edu 上以约 6E18 FLOPs 每轮训练，观察到与原文一致的 U 型扩展曲线，且性能优于纯 MoE 基线。