近期,在DeepSeek-R1模型发布一周年之际,一个代号为“Model 1”的全新AI模型架构在DeepSeek的GitHub代码库中悄然现身。这一发现迅速引发了技术社区的高度关注,普遍推测这极有可能是传闻中即将发布的旗舰模型DeepSeek V4的内部开发代号或首个工程版本。
根据此前媒体报道和代码分析,这次的“Model 1”并非简单的版本迭代,而是一次深刻的架构级革新,标志着DeepSeek乃至大模型行业的发展思路,正从单纯追求参数规模的“堆料竞赛”,转向更加注重效率与设计的“架构创新”。
此次新架构最引人瞩目的核心技术,是其有望整合DeepSeek近期发布的两项重要研究成果:Engram条件记忆模块和mHC(流形约束超连接)训练框架。

Engram记忆模块的设计思路,通俗地讲,是为AI模型引入了一套“查算分离”的机制。它将模型的记忆功能与推理功能解耦,就像为模型配备了一个专门负责储存和检索静态知识的“图书管理员”,而推理核心则可以更专注于逻辑分析和创造性任务。当面对事实性问题时,模型能像查阅资料一样直接从记忆库中快速调取答案,而不是每次都从头进行复杂的计算,从而大幅提升响应速度和准确性。
mHC训练框架则着眼于解决大模型训练过程中的稳定性和信息传递效率问题。传统模型在训练时,信息在层与层之间传递容易出现损耗或不稳。mHC框架通过一种创新的约束机制,好比将信息传递的“单车道高速”升级为“多车道智能立交”,确保信息在多通道间高效、稳定地流动,让模型学得更扎实,有效提升了大规模训练的稳定性。
除了这两大理论突破,GitHub代码中显现的技术细节也印证了新架构对效率的极致追求。代码显示,“Model 1”在关键技术上与现有模型存在显著差异,尤其体现在对键值(KV)缓存布局的优化、稀疏性处理的应用以及对FP8数据格式的解码支持上。这些技术革新共同指向一个目标:在保证模型性能的同时,大幅降低内存占用和计算开销。例如,FP8低精度数据格式能以更少的显存承载模型参数,而稀疏性处理则让模型在处理任务时,不必调动所有“脑细胞”,而是智能地激活最相关的部分进行计算,从而实现“省钱又提速”。
此外,代码还表明“Model 1”对硬件的适配也具有前瞻性,不仅深度适配了英伟达下一代GPU架构(如Blackwell),同时也考虑了对国产AI芯片的支持。这意味着新模型不仅能在顶级硬件上释放全部潜力,也为在更广泛的、包括国产算力在内的硬件上高效运行奠定了基础,有助于降低大模型的使用门槛。
综合来看,DeepSeek Model 1的出现,预示着一款在编程能力、长上下文处理(支持百万级tokens)等方面具备强大实力,同时在架构层面追求极致效率的新一代模型的到来。它所探索的从“堆参数”到“拼架构”的技术路径,为行业摆脱对算力的过度依赖提供了新的范式,推动大模型向更高效、更实用、更易于工业化落地的方向演进。