DeepSeek Model 1曝光,告别堆料竞赛,开启大模型效率革命

源自36位全网作者

01-22 07:23

近期,在DeepSeek-R1模型发布一周年之际,一个代号为“Model 1”的全新AI模型架构在DeepSeek的GitHub代码库中悄然现身。这一发现迅速引发了技术社区的高度关注,普遍推测这极有可能是传闻中即将发布的旗舰模型DeepSeek V4的内部开发代号或首个工程版本。

根据此前媒体报道和代码分析,这次的“Model 1”并非简单的版本迭代,而是一次深刻的架构级革新,标志着DeepSeek乃至大模型行业的发展思路,正从单纯追求参数规模的“堆料竞赛”,转向更加注重效率与设计的“架构创新”。

此次新架构最引人瞩目的核心技术,是其有望整合DeepSeek近期发布的两项重要研究成果:Engram条件记忆模块和mHC(流形约束超连接)训练框架。

DeepSeek Model 1曝光,告别堆料竞赛,开启大模型效率革命

Engram记忆模块的设计思路,通俗地讲,是为AI模型引入了一套“查算分离”的机制。它将模型的记忆功能与推理功能解耦,就像为模型配备了一个专门负责储存和检索静态知识的“图书管理员”,而推理核心则可以更专注于逻辑分析和创造性任务。当面对事实性问题时,模型能像查阅资料一样直接从记忆库中快速调取答案,而不是每次都从头进行复杂的计算,从而大幅提升响应速度和准确性。

mHC训练框架则着眼于解决大模型训练过程中的稳定性和信息传递效率问题。传统模型在训练时,信息在层与层之间传递容易出现损耗或不稳。mHC框架通过一种创新的约束机制,好比将信息传递的“单车道高速”升级为“多车道智能立交”,确保信息在多通道间高效、稳定地流动,让模型学得更扎实,有效提升了大规模训练的稳定性。

除了这两大理论突破,GitHub代码中显现的技术细节也印证了新架构对效率的极致追求。代码显示,“Model 1”在关键技术上与现有模型存在显著差异,尤其体现在对键值(KV)缓存布局的优化、稀疏性处理的应用以及对FP8数据格式的解码支持上。这些技术革新共同指向一个目标:在保证模型性能的同时,大幅降低内存占用和计算开销。例如,FP8低精度数据格式能以更少的显存承载模型参数,而稀疏性处理则让模型在处理任务时,不必调动所有“脑细胞”,而是智能地激活最相关的部分进行计算,从而实现“省钱又提速”。

此外,代码还表明“Model 1”对硬件的适配也具有前瞻性,不仅深度适配了英伟达下一代GPU架构(如Blackwell),同时也考虑了对国产AI芯片的支持。这意味着新模型不仅能在顶级硬件上释放全部潜力,也为在更广泛的、包括国产算力在内的硬件上高效运行奠定了基础,有助于降低大模型的使用门槛。

综合来看,DeepSeek Model 1的出现,预示着一款在编程能力、长上下文处理(支持百万级tokens)等方面具备强大实力,同时在架构层面追求极致效率的新一代模型的到来。它所探索的从“堆参数”到“拼架构”的技术路径,为行业摆脱对算力的过度依赖提供了新的范式,推动大模型向更高效、更实用、更易于工业化落地的方向演进。

内容由AI生成

精选参考来源

1. #DeepSeek新架构意味着什么# 今天看到新闻,代号"Model1"的全新架构已悄然在GitHub现身——这极有可...

#DeepSeek新架构意味着什么# 今天看到新闻,代号"Model1"的全新架构已悄然在GitHub现身——这极有可... 今天看到新闻,代号"Model1"的全新架构已悄然在GitHub现身

2. #DeepSeek新架构意味着什么#DeepSeek代号Model1的全新架构曝光,标志着其从参数堆砌向架构优化的关键转...

#DeepSeek新架构意味着什么#DeepSeek代号Model1的全新架构曝光,标志着其从参数堆砌向架构优化的关键转... DeepSeek代号Model1的全新架构曝光,标志着其从参数堆砌向架构

3. #DeepSeek新架构意味着什么# 代码泄密藏不住大动作!GitHub现身的Model1大概率是DeepSeek V4...

#DeepSeek新架构意味着什么# 代码泄密藏不住大动作!GitHub现身的Model1大概率是DeepSeek V4... 代码泄密藏不住大动作!GitHub现身的Model1大概率是DeepS

4. 【#DeepSeek新架构意味着什么# 】DeepSeek新模型尚未官宣,但代号"Model1"的全新架构已悄然在Git...

【#DeepSeek新架构意味着什么# 】DeepSeek新模型尚未官宣,但代号"Model1"的全新架构已悄然在Git... 【 】DeepSeek新模型尚未官宣,但代号"Model1"的全新架构已

5. 【DeepSeek新模型MODEL1曝光 代码预示新架构】据量子位公众号消息,DeepSeek-R1发布一周年之际,新模...

【DeepSeek新模型MODEL1曝光 代码预示新架构】据量子位公众号消息,DeepSeek-R1发布一周年之际,新模... 【DeepSeek新模型MODEL1曝光 代码预示新架构】据量子位公众号

6. DeepSeek新模型呼之欲出“MODEL1”作为临时代号曝光在DeepSeek-R1 发布一周年之际DeepSeek ...

DeepSeek新模型呼之欲出“MODEL1”作为临时代号曝光在DeepSeek-R1 发布一周年之际DeepSeek ... DeepSeek新模型呼之欲出“MODEL1”作为临时代号曝光在Deep

7. 国产AI放大招!DeepSeek新模型MODEL1曝光,架构大改

国产AI放大招!DeepSeek新模型MODEL1曝光,架构大改 国产AI放大招!DeepSeek新模型MODEL1曝光,架构大改硬核科创观察室1768956729 家人们,国产大模型要正面硬刚Ope

8. DeepSeek线上模型重大升级!双模式+超长上下文,国产AI够硬核!

DeepSeek线上模型重大升级!双模式+超长上下文,国产AI够硬核!DeepSeek线上模型重大升级!双模式+超长上下文,国产AI够硬核!清华同学1758583800 2025年9月22日,De

9. 【#DeepSeek新模型曝光#】1 月 21 日,The Information 月初爆料称,DeepSeek 将在今...

【#DeepSeek新模型曝光#】1 月 21 日,The Information 月初爆料称,DeepSeek 将在今... 【】1 月 21 日,The Information 月初爆料称,Dee

10. 【#DeepSeek新模型曝光#】 1月21日消息,据The Information爆料,国产AI企业DeepSeek计...

【#DeepSeek新模型曝光#】 1月21日消息,据The Information爆料,国产AI企业DeepSeek计... 【】 1月21日消息,据The Information爆料,国产AI企业

11. 硬核评测5款热门的国产AI大模型产品,谁才是国产AI之光?#deepseek #豆包 #元宝 #阿里巴巴 #千问

今天我们来聊一个避不开的话题国产AI大模型随着技术的不断突破国产大模型正在经历一轮疯狂的加速迭代以头部互联网集团为例今年1到9月共完成了182次模型发布和更新平均每5.7天就迎来一次升级这种高频迭代也

12. DeepSeek 新架构 MODEL1 曝光:春节前后的“大礼包”稳了?DeepSeek-R1 发布才一周年,新架构 M...

DeepSeek 新架构 MODEL1 曝光:春节前后的“大礼包”稳了?DeepSeek-R1 发布才一周年,新架构 M... DeepSeek 新架构 MODEL1 曝光:春节前后的“大礼包”稳了?

13. #DeepSeek新架构意味着什么#Deepseek新模型可能真的要来了。。。MLA:将多头注意力KV压缩成低秩潜向量进...

#DeepSeek新架构意味着什么#Deepseek新模型可能真的要来了。。。MLA:将多头注意力KV压缩成低秩潜向量进... Deepseek新模型可能真的要来了。。。MLA:将多头注意力KV压缩成

14. 【DeepSeek露出神秘模型,梁文锋用V4憋大招?】 #deepseek##ai超级工厂##梁文锋##大模型# 在D...

【DeepSeek露出神秘模型,梁文锋用V4憋大招?】 #deepseek##ai超级工厂##梁文锋##大模型# 在D... 【DeepSeek露出神秘模型,梁文锋用V4憋大招?】 在DeepS

15. 突破!DeepSeek新模型适配国产AI芯片!

突破!DeepSeek新模型适配国产AI芯片!突破!DeepSeek新模型适配国产AI芯片!芯片行业动态1759406742 国内人工智能领域迎来软硬件协同发展的重要里程碑。9月29日,深度求索(

16. 国产算力适配DeepSeek新模型,AI概念股集体拉升

国产算力适配DeepSeek新模型,AI概念股集体拉升国产算力适配DeepSeek新模型,AI概念股集体拉升21世纪经济报道1759203013 9月30日早盘,AI相关概念股集体拉升。AI语料方

17. AI界的“拼多多”来了!美国巨头几十亿的护城河,被它一夜填平!#ai #deepseek #国产模型 #老高ai笔记 #人工智能

还在给OpenAI交智商税先停一停就在昨晚DeepSig直接把桌子给掀了最新的V3.2不仅逻辑推理拿了金牌价格更是低到像白送这哪里是技术升级这分明是拿着拼多多的定价来搞技术扶贫你肯定好奇人家巨头几百亿

18. R1一周年,DeepSeek Model 1悄然现身

R1一周年,DeepSeek Model 1悄然现身 R1一周年,DeepSeek Model 1悄然现身机器之心Pro1768961455 编辑|Panda2025 年 1 月 20 日,DeepS

19. 【DeepSeek新模型曝光,V4要来力?】1月21日,据APPSO,在DeepSeek-R1发布一周年之际,官方Git...

【DeepSeek新模型曝光,V4要来力?】1月21日,据APPSO,在DeepSeek-R1发布一周年之际,官方Git... 【DeepSeek新模型曝光,V4要来力?】1月21日,据APPSO,在

20. 国产AI王炸!DeepSeek MODEL1架构大改,显存狂降30%+推理提速40%

国产AI王炸!DeepSeek MODEL1架构大改,显存狂降30%+推理提速40% 国产AI王炸!DeepSeek MODEL1架构大改,显存狂降30%+推理提速40%屋顶仰望流星雨17689605

21. DeepSeek新模型曝光:MODEL1代码预示新架构,最快有望2月发布

DeepSeek新模型曝光:MODEL1代码预示新架构,最快有望2月发布 DeepSeek新模型曝光:MODEL1代码预示新架构,最快有望2月发布IT之家1768955145 IT之家 1 月 21

22. DeepSeek AI新模型曝光:搭载 MODEL1 全新架构,最快2月上线

DeepSeek AI新模型曝光:搭载 MODEL1 全新架构,最快2月上线 DeepSeek AI新模型曝光:搭载 MODEL1 全新架构,最快2月上线环球网1768976496 来源:环球网 【环

23. R1模型发布一周年 DeepSeek新模型“MODEL1”曝光

R1模型发布一周年 DeepSeek新模型“MODEL1”曝光 R1模型发布一周年 DeepSeek新模型“MODEL1”曝光财联社1768967761 《科创板日报》1月21日讯(编辑 宋子乔)20

24. 独家拆解DeepSeek MODEL1技术突破

独家拆解DeepSeek MODEL1技术突破 作为Hugging Face获赞最多的开源LLM——DeepSeek-R1发布一周年之际,行业正迫切需要兼顾高效算力适配与长文本处理能力的新方案,传统架

25. #DeepSeek新架构意味着什么#DeepSeek Model 1架构聚焦效率突破,通过KV缓存压缩、稀疏性处理与FP...

#DeepSeek新架构意味着什么#DeepSeek Model 1架构聚焦效率突破,通过KV缓存压缩、稀疏性处理与FP... DeepSeek Model 1架构聚焦效率突破,通过KV缓存压缩、稀疏

26. 国产AI“双线作战”:DeepSeek新模型推理比肩GPT-5、豆包发布手机助手

国产AI“双线作战”:DeepSeek新模型推理比肩GPT-5、豆包发布手机助手 国产AI“双线作战”:DeepSeek新模型推理比肩GPT-5、豆包发布手机助手福布斯1764658069 12月2日

27. 2025年初DeepSeek的崛起重塑了国产大模型格局,带动中国科技股重回全球视野,AI算力板块领涨,模型与应用端迎来爆...

2025年初DeepSeek的崛起重塑了国产大模型格局,带动中国科技股重回全球视野,AI算力板块领涨,模型与应用端迎来爆... 2025年初DeepSeek的崛起重塑了国产大模型格局,带动中国科技股重

28. #deepseek新架构意味着什么#DeepSeek作为国产领军者,之前的R1模型已经在数学、编程测试中接近国际顶尖水平...

#deepseek新架构意味着什么#DeepSeek作为国产领军者,之前的R1模型已经在数学、编程测试中接近国际顶尖水平... DeepSeek作为国产领军者,之前的R1模型已经在数学、编程测试中接近

29. DeepSeek新模型开源,新架构亮了,国产AI芯片集体狂欢

DeepSeek新模型开源,新架构亮了,国产AI芯片集体狂欢 DeepSeek新模型开源,新架构亮了,国产AI芯片集体狂欢36氪1759194971 DeepSeek离下一代架构,又近了一步!智东西9

30. 究竟会花落谁家?DeepSeek最新大模型瞄准了下一代国产AI芯片

究竟会花落谁家?DeepSeek最新大模型瞄准了下一代国产AI芯片 究竟会花落谁家?DeepSeek最新大模型瞄准了下一代国产AI芯片机器之心Pro1755846452 机器之心报道编辑:泽南、杜伟软

31. AI应用再出大利好,据新浪科技,据两位直接知情人士透露,深度求索(DeepSeek)预计将在未来几周内推出新一代旗舰级人...

AI应用再出大利好,据新浪科技,据两位直接知情人士透露,深度求索(DeepSeek)预计将在未来几周内推出新一代旗舰级人... AI应用再出大利好,据新浪科技,据两位直接知情人士透露,深度求索(Dee

32. 【#DeepSeek新模型曝光#】1 月 21 日,The Information 月初爆料称,DeepSeek 将在今...

【#DeepSeek新模型曝光#】1 月 21 日,The Information 月初爆料称,DeepSeek 将在今... 【】1 月 21 日,The Information 月初爆料称,Dee

33. 【西部计算机】超级模型带来超级应用AI板块有望迎来重大催化,DeepSeek或将于今年2月发布新一代旗舰模型V4。The...

【西部计算机】超级模型带来超级应用AI板块有望迎来重大催化,DeepSeek或将于今年2月发布新一代旗舰模型V4。The... 【西部计算机】超级模型带来超级应用AI板块有望迎来重大催化,DeepSe

34. 距离 DeepSeek R1 发布,已经 1 整年零 1 天了。去年它横空出世,改写中国 AI 生态,让顶尖 AI 走进...

距离 DeepSeek R1 发布,已经 1 整年零 1 天了。去年它横空出世,改写中国 AI 生态,让顶尖 AI 走进... 距离 DeepSeek R1 发布,已经 1 整年零 1 天了。去年它横

35. 毫无征兆!DeepSeek R1爆更86页论文,这才是真正的Open

毫无征兆!DeepSeek R1爆更86页论文,这才是真正的Open 毫无征兆!DeepSeek R1爆更86页论文,这才是真正的Open新智元1767844002 编辑:桃子 KingHZ【新智元导

36. DeepSeek 计划二月中旬发布新模型 DeepSeek-V4,有哪些技术亮点?能第二次震惊世界吗?

DeepSeek 计划二月中旬发布新模型 DeepSeek-V4,有哪些技术亮点?能第二次震惊世界吗? 不管 DeepSeek 什么时候发布新的大版本,就现阶段而言,大家对于 40tps 模型的预期是
0
扫一下,分享更方便,购买更轻松
0评论

当前文章无评论,是时候发表评论了
提示信息

取消
确认
评论举报

最新文章 热门文章