传统OCR模型在处理复杂文档版面时,常因固定的扫描顺序而出错。DeepSeek-OCR 2对此提出革新方案,通过引入视觉因果流,让模型在识别文字前,先学会像人类一样进行语义驱动的阅读,从而在根源上提升了理解准确性与效率。
智能速览
传统OCR将图像机械转为序列,不符合人类真实阅读逻辑。
DeepSeek-OCR 2引入视觉因果流,让模型主动规划阅读顺序。
新模型在基准测试中性能提升3.73%,阅读顺序更接近人类。
架构上采用LLM统一编码,在约500M参数下实现高效视觉处理。
精华内容
传统OCR模型将二维图像机械地转换为一维序列,在面对复杂版面时常常力不从心。DeepSeek-OCR 2另辟蹊径,试图在模型内部重现人类语义驱动的阅读逻辑。
传统OCR的困境
现有的OCR与视觉语言模型普遍存在一个结构性问题:它们习惯将二维图像通过固定的光栅扫描(从左到右、从上到下)转换为一维序列。这种方式在处理论文、表格、公式等复杂版面时,与人类根据语义动态调整阅读顺序的习惯相悖,容易导致理解偏差。它隐含了一个不切实际的假设,即图像信息是按固定顺序排列的,而这恰恰是许多识别错误的根源。
视觉因果流设计
DeepSeek-OCR 2的核心创新在于引入了Causal Flow Query,即“视觉因果流”。这组Query如同模型的“阅读指针”,每个指针都能访问全图信息,但指针之间严格遵循因果顺序。通过精心设计的Attention Mask,模型在编码阶段就自主形成“先看什么、再看什么”的语义依赖关系,将二维图像转化为一条符合阅读逻辑的一维序列,再交由语言模型解码。
实测性能跃升
这种架构上的革新带来了显著的效果提升。在权威的OmniDocBench v1.5基准测试中,DeepSeek-OCR 2仅使用256-1120个视觉Token,便取得了91.09%的整体成绩,相比上一代提升了3.73%。更能说明问题的是,其阅读顺序合理性指标R-order的编辑距离从0.085大幅优化至0.057,证明模型不仅“看得更准”,而且“读得更对”。
高效的统一架构
性能的提升并非源于简单的参数堆砌。新模型的Encoder部分采用了约500M参数量的Qwen2-0.5B作为LLM架构,通过在同一Transformer中融合双向注意力与因果注意力,高效地实现了全局感知和顺序建模。这种用LLM统一视觉编码的思路,兼具创新性与实用性,为后续模型发展提供了高性价比的参考路径。