DeepSeek开源新一代OCR,从“扫描”到“推理”,让AI像人一样阅读

源自44位全网作者

01-28 07:25

近日,DeepSeek团队发布并开源了其新一代文档识别模型——DeepSeek-OCR 2,该模型在视觉编码领域实现了重大突破,旨在让AI能够像人类一样,以符合逻辑的顺序“阅读”和“理解”复杂的文档。

传统OCR(光学字符识别)技术在处理文档时,大多采用固定的“光栅扫描”模式,即机械地从左上角到右下角逐行读取。这种方式在面对多栏排版、跨页表格、公式或图文混排等复杂布局时,往往会打乱内容原有的逻辑关系,导致识别结果支离破碎。DeepSeek-OCR 2的核心创新正是为了解决这一痛点,它引入了名为“视觉因果流”(Visual Causal Flow)的全新概念,实现了从“固定扫描”到“语义推理”的范式转变。

DeepSeek开源新一代OCR,从“扫描”到“推理”,让AI像人一样阅读

这一变革的关键在于其全新的DeepEncoder V2视觉编码器。与前代及多数模型采用的CLIP视觉编码器不同,DeepSeek-OCR 2创新性地使用了轻量级的大语言模型架构(Qwen2-0.5B)作为编码器。其内部设计了一种独特的双流注意力机制:对于从图像中提取的原始视觉信息(视觉token),模型采用双向注意力,使其能够像人眼扫视一样,先对整个页面布局有全局性的感知;同时,模型引入了与视觉token等量的“因果流查询”(causal flow query),这部分则采用因果注意力机制。这些可学习的查询token能够根据图像的整体语义,动态地学习并构建一个符合逻辑的阅读顺序,对视觉信息进行智能重排。

整个工作流程形成了一种两级因果推理:DeepEncoder V2在视觉层面完成对内容的逻辑重排,决定“先看哪里、后看哪里”;然后,这个经过排序的、信息密度极高的视觉序列才被送入后续的解码器(一个3B参数的MoE模型)进行文本生成。这样一来,解码器接收到的是已经“理顺”了的信息,从而能更准确地还原文档的自然阅读顺序和结构。

凭借这一创新架构,DeepSeek-OCR 2在性能和效率上都取得了显著提升。在效率方面,它通过视觉分词器和多裁剪策略,将处理一整页复杂文档所需的视觉token数量控制在256到1120个之间,相较于其他模型动辄需要数千个token,极大地降低了计算开销。在性能方面,根据官方技术报告,该模型在权威文档理解基准测试OmniDocBench v1.5上取得了91.09%的综合得分,相较前代提升了3.73%。尤其在衡量阅读顺序准确性的指标上,其编辑距离从0.085显著下降至0.057,证明其逻辑理解能力大幅增强。在同等资源限制下,其文档解析能力甚至超越了部分顶尖的闭源模型。

DeepSeek开源新一代OCR,从“扫描”到“推理”,让AI像人一样阅读

DeepSeek-OCR 2的发布及开源,不仅为文档处理、RAG(检索增强生成)等应用领域提供了更强大的基础工具,也为多模态技术的发展探索了新的方向。它验证了让语言模型参与到视觉编码过程中的可行性,为未来构建能够处理图像、文本、音频等多种信息的统一全模态(omni-modal)编码器提供了富有前景的思路。

内容由AI生成

精选参考来源

1. DeepSeek发布OCR2,实现真正二维推理

DeepSeek发布OCR2,实现真正二维推理 DeepSeek今天刚刚发布了OCR 2模型,其核心创新集中于DeepEncoder V2,其架构可划分为四个关键模块,形成端到端的因果视觉流处理流水线

2. DeepSeek-OCR2 开源!RAG 的文档解析天花板

DeepSeek-OCR2 开源!RAG 的文档解析天花板 🔥 DeepSeek-OCR2 正式开源,号称首创“因果流(Causal Flow)”视觉推理,实测数据直接超越闭源的 Gemini-3 P

3. #DeepSeek开源OCR2#DeepSeek-OCR 2这次更新,有个核心思路很有意思:它想让AI像人一样“看懂”文...

#DeepSeek开源OCR2#DeepSeek-OCR 2这次更新,有个核心思路很有意思:它想让AI像人一样“看懂”文... DeepSeek-OCR 2这次更新,有个核心思路很有意思:它想让AI像

4. #DeepSeek开源OCR2新模型# DeepSeek-OCR 2实测:复杂文档识别终于能用明白啦!#HOW I AI...

#DeepSeek开源OCR2新模型# DeepSeek-OCR 2实测:复杂文档识别终于能用明白啦!#HOW I AI... AI看图识字界又搞大事了!DeepSeek这次不更大模型,直接甩出Dee

5. 刚刚,DeepSeek又探索新架构了,开源OCR 2

刚刚,DeepSeek又探索新架构了,开源OCR 2 刚刚,DeepSeek又探索新架构了,开源OCR 2机器之心Pro1769494769 机器之心编辑部嘿!刚刚,DeepSeek 又更新了!这次是

6. 🚀 DeepSeek-OCR高精解码长文本救星

🚀 DeepSeek-OCR高精解码长文本救星 2025年10月底开源的DeepSeek-OCR是长文本OCR处理的new baseline。 🌟 核心亮点:一图胜千言! 不同于传统的文本处理,Dee

7. 极致压缩,DeepSeek-OCR 2的全新范式

极致压缩,DeepSeek-OCR 2的全新范式 DeepSeek-OCR 2 已发布并开源,技术报告同步公开。相比上一代,这次最核心的升级不在 decoder,而在 DeepEncoder V2:它

8. DeepSeek发布OCR 2.0:AI像人类一样阅读文档

DeepSeek发布OCR 2.0:AI像人类一样阅读文档 DeepSeek团队刚刚发布了全新的DeepSeek-OCR 2模型,在视觉编码领域实现了重大突破。新版本通过引入DeepEncoder V

9. 🚀DeepSeek-OCR 2 发布: vLLM Day 0 支持

🚀DeepSeek-OCR 2 发布: vLLM Day 0 支持 🚀 DeepSeek-OCR 2 来了 —— 首创「视觉因果流」(Visual Causal Flow),让模型像人类一样阅读文档,

10. DeepSeek-OCR 2让视觉模型学会“逻辑阅读”

DeepSeek-OCR 2让视觉模型学会“逻辑阅读” DeepSeek 悄悄发了一篇新论文《DeepSeek-OCR 2》,这次不仅仅是 OCR 的提升,而是对 VLM 视觉编码器范式的一次重要探索

11. Ai应用大利好来了,消息面:1月27日,DeepSeek发布全新DeepSeek-OCR 2模型,采用创新的DeepEn...

Ai应用大利好来了,消息面:1月27日,DeepSeek发布全新DeepSeek-OCR 2模型,采用创新的DeepEn... Ai应用大利好来了,消息面:1月27日,DeepSeek发布全新Deep

12. DeepSeek-OCR2:重塑VLM视觉理解范式

DeepSeek-OCR2:重塑VLM视觉理解范式 🔬 问题意识 当前多模态大模型普遍采用 CLIP-style 视觉编码器,其本质是一种对齐任务:将图像特征映射到固定的视觉Token序列。这种"图像

13. #DeepSeek又上新了##DeepSeek开源OCR2#【DeepSeek-OCR 2 发布:让 AI 像人一样“读...

#DeepSeek又上新了##DeepSeek开源OCR2#【DeepSeek-OCR 2 发布:让 AI 像人一样“读... 【DeepSeek-OCR 2 发布:让 AI 像人一样“读懂”复杂文档

14. 弃用CLIP‼️DeepSeek开源VLM全新架构

弃用CLIP‼️DeepSeek开源VLM全新架构 传统的视觉语言模型(VLMs)在将视觉 token 输入大语言模型(LLM)时,通常采用固定的光栅扫描顺序(从左上到右下)并配合固定的位置编码将视觉

15. 重磅!DeepSeek发布新模型并开源

重磅!DeepSeek发布新模型并开源 重磅!DeepSeek发布新模型并开源每日经济新闻1769502234 1月27日,DeepSeek团队发布全新DeepSeek-OCR 2模型并开源,采用创新

16. 拆解DeepSeek-OCR:3个核心技术让OCR快20倍

拆解DeepSeek-OCR:3个核心技术让OCR快20倍 刚测完DeepSeek新发的OCR模型,100页PDF文档只用15秒就转成Markdown。更夸张的是Token消耗只有GPT-4V的1/1

17. DeepSeek-OCR 2横空出世!技术革新下的产业链龙头标的全解析

DeepSeek-OCR 2横空出世!技术革新下的产业链龙头标的全解析 DeepSeek-OCR 2横空出世!技术革新下的产业链龙头标的全解析北交所炒家1769510297 1月27日,DeepSee

18. #DeepSeek新模型为何被夸爆#DeepSeek新模型被夸爆的原因主要是其在技术上的创新突破以及带来的高效能表现。具...

#DeepSeek新模型为何被夸爆#DeepSeek新模型被夸爆的原因主要是其在技术上的创新突破以及带来的高效能表现。具... DeepSeek新模型被夸爆的原因主要是其在技术上的创新突破以及带来的高

19. DeepSeek开源新模型,用视觉方式压缩一切

DeepSeek开源新模型,用视觉方式压缩一切 DeepSeek开源新模型,用视觉方式压缩一切观察者网1760957099 (文/陈济深 编辑/张广凯) 10月20日,DeepSeek再度开源新模型。

20. #DeepSeek开源OCR2新模型# DeepSeek-OCR2这个新模型最近很亮眼,它用了个巧妙的思路:把传统视觉编...

#DeepSeek开源OCR2新模型# DeepSeek-OCR2这个新模型最近很亮眼,它用了个巧妙的思路:把传统视觉编... DeepSeek-OCR2这个新模型最近很亮眼,它用了个巧妙的思路:把

21. 【DeepSeek发布DeepSeek-OCR 2 AI能够以与人类相同的逻辑顺序“看”一张图片】DeepSeek发布全...

【DeepSeek发布DeepSeek-OCR 2 AI能够以与人类相同的逻辑顺序“看”一张图片】DeepSeek发布全... 【DeepSeek发布DeepSeek-OCR 2 AI能够以与人类相同

22. DeepSeek-OCR:视觉压缩突破长文本瓶颈

DeepSeek-OCR:视觉压缩突破长文本瓶颈 DeepSeek-OCR:Contexts Optical Compression 🌍Model:https://huggingface.co/d

23. 中科院证伪DeepSeek-OCR:90%准确率是幻觉

中科院证伪DeepSeek-OCR:90%准确率是幻觉 DeepSeek-OCR提出用“光学压缩”把长文本编码为极少量视觉token,再由大模型解码,被视为突破LLM长上下文瓶颈的关键路径。该研究系统

24. DeepSeek新模型被硅谷疯夸!用二维视觉压缩一维文字,单GPU能跑

DeepSeek新模型被硅谷疯夸!用二维视觉压缩一维文字,单GPU能跑 DeepSeek新模型被硅谷疯夸!用二维视觉压缩一维文字,单GPU能跑量子位1761003554 DeepSeek最新开源的模型

25. DeepSeek 这还没到过年就开始发力了! 发布了升级后的 OCR 2 模型,主要优化是加入模拟人类视觉的“因果推理...

DeepSeek 这还没到过年就开始发力了! 发布了升级后的 OCR 2 模型,主要优化是加入模拟人类视觉的“因果推理... DeepSeek 这还没到过年就开始发力了! 发布了升级后的 OCR 2

26. #DeepSeek新模型为何被夸爆# 为啥是这个时候英伟达退场? 当英伟达因出口管制从中国先进AI芯片市场黯然退场,...

#DeepSeek新模型为何被夸爆# 为啥是这个时候英伟达退场? 当英伟达因出口管制从中国先进AI芯片市场黯然退场,... 为啥是这个时候英伟达退场? 当英伟达因出口管制从中国先进AI芯片市场黯然退

27. DeepSeek新模型很疯狂:整个AI圈都研究视觉路线,Karpathy不装了

DeepSeek新模型很疯狂:整个AI圈都研究视觉路线,Karpathy不装了 DeepSeek新模型很疯狂:整个AI圈都研究视觉路线,Karpathy不装了机器之心Pro1761018762 机器之

28. 太强了!DeepSeek刚刚开源新模型,用视觉方式压缩一切

太强了!DeepSeek刚刚开源新模型,用视觉方式压缩一切 太强了!DeepSeek刚刚开源新模型,用视觉方式压缩一切机器之心Pro1760953927 机器之心报道机器之心编辑部我们或许能通过文本到

29. DeepSeek OCR究竟解决了什么问题?

DeepSeek OCR究竟解决了什么问题? DeepSeek OCR究竟解决了什么问题?人人都是产品经理1761106061 在AI模型泛滥的时代,OCR技术似乎早已“卷无可卷”。但DeepSeek

30. DeepSeek最新王炸模型:VLM架构重磅突破,AI像人一样读图

DeepSeek最新王炸模型:VLM架构重磅突破,AI像人一样读图 DeepSeek最新王炸模型:VLM架构重磅突破,AI像人一样读图智东西1769497006 智东西作者 | 陈骏达编辑 | 云鹏智

31. DeepSeek-OCR模型为何这么火?盘了一下OCR发展史

DeepSeek-OCR模型为何这么火?盘了一下OCR发展史 DeepSeek-OCR模型为何这么火?盘了一下OCR发展史TechWeb1761296287 【TechWeb】10月24日消息,Dee

32. DeepSeek新模型“杀疯了”!用视觉压缩文字,开源即获5.7k Star,Karpathy直呼:Tokenizer必...

DeepSeek新模型“杀疯了”!用视觉压缩文字,开源即获5.7k Star,Karpathy直呼:Tokenizer必... DeepSeek新模型“杀疯了”!用视觉压缩文字,开源即获5.7k St

33. DeepSeek又拿第一,首创「因果流」视觉推理,超越Gemini

DeepSeek又拿第一,首创「因果流」视觉推理,超越Gemini DeepSeek又拿第一,首创「因果流」视觉推理,超越Gemini36氪1769514960 【导读】DeepSeek开源DeepS

34. DeepSeek又拿第一!首创「因果流」视觉推理,超越Gemini

DeepSeek又拿第一!首创「因果流」视觉推理,超越Gemini DeepSeek又拿第一!首创「因果流」视觉推理,超越Gemini新智元1769500560 编辑:定慧 好困【新智元导读】Deep

35. [CV]《DeepSeek-OCR: Contexts Optical Compression》H Wei, Y Sun...

[CV]《DeepSeek-OCR: Contexts Optical Compression》H Wei, Y Sun... [CV]《DeepSeek-OCR: Contexts Optical

36. 【依旧主打token性价比,新模型DeepSeek-OCR开源】10月20日,DeepSeek-AI团队发布《DeepS...

【依旧主打token性价比,新模型DeepSeek-OCR开源】10月20日,DeepSeek-AI团队发布《DeepS... 【依旧主打token性价比,新模型DeepSeek-OCR开源】10月2

37. 91.09%高分登顶 DeepSeek-OCR2 重构阅读逻辑

91.09%高分登顶 DeepSeek-OCR2 重构阅读逻辑 91.09%高分登顶 DeepSeek-OCR2 重构阅读逻辑科技思维1769512484 1月27日,DeepSeek正式开源新一代O

38. DeepSeek OCR为什么这么“惊艳”

DeepSeek OCR为什么这么“惊艳” DeepSeek OCR为什么这么“惊艳”人人都是产品经理1761879158 在大模型浪潮中,OCR 技术似乎已成“老生常谈”。但 DeepSeek OC

39. DeepSeek春节前放大招:发布OCR 2模型,引入“视觉因果推理”

DeepSeek春节前放大招:发布OCR 2模型,引入“视觉因果推理” DeepSeek春节前放大招:发布OCR 2模型,引入“视觉因果推理”新浪财经1769496141 来源:市场资讯(来源:网易科

40. DeepseekOCR到底做了什么?

DeepseekOCR到底做了什么? DeepseekOCR到底做了什么?人人都是产品经理1763193702 文字识别工具很多,但 DeepseekOCR 为什么突然火了?答案在于它不仅能“看清”,

41. DeepSeek-OCR 2重磅发布:AI学会“人类视觉逻辑”,以因果流解读图片

DeepSeek-OCR 2重磅发布:AI学会“人类视觉逻辑”,以因果流解读图片 DeepSeek-OCR 2重磅发布:AI学会“人类视觉逻辑”,以因果流解读图片华尔街见闻1769493859 Dee

42. 说个暴论,Deepseek-OCR干翻了所有架构

说个暴论,Deepseek-OCR干翻了所有架构 DeepSeek-OCR每次都能给人带来惊喜,确实带来了很多更加前沿的探索,与新的范式。 1. 图像所能承载的二维信息,确实更多,一个上万的文本tok

43. 小参数全面领先大参数 AI落地的逻辑变了

小参数全面领先大参数 AI落地的逻辑变了 权威榜单OmniDocBench V1.5战报:PaddleOCR-VL综合得分92.56,超越DeepSeek-OCR(86.46分)约6分,拿下全球第

44. DeepSeek刚刚发布了OCR-V2! 用LLM替代CLIP, 这思路太野了!不是这还没过年呢! DeepSeek-O...

DeepSeek刚刚发布了OCR-V2! 用LLM替代CLIP, 这思路太野了!不是这还没过年呢! DeepSeek-O... DeepSeek刚刚发布了OCR-V2! 用LLM替代CLIP, 这思路
0
扫一下,分享更方便,购买更轻松
0评论

当前文章无评论,是时候发表评论了
提示信息

取消
确认
评论举报

最新文章 热门文章