张大妈

DeepSeek又发新论文:让AI用“人类思维”理解图像

源自今日头条:新京报

02-05 15:27

DeepSeek最新提出的’视觉因果流’机制,改变了传统视觉模型按像素顺序处理图像的方式,转而模拟人类阅读时的语义逻辑理解路径。这一创新在表格、文档等复杂场景识别中表现突出,为AI视觉理解开辟了新思路。

DeepSeek又发新论文:让AI用“人类思维”理解图像智能速览

  • 传统视觉模型按固定像素顺序处理图像,在结构化内容中存在局限

  • DeepSeek-OCR 2提出’视觉因果流’机制,根据语义关系动态组织视觉信息

  • 新模型通过改进的视觉编码器判断信息依赖关系,实现视觉token动态重排

  • 实验显示整体性能提升3.73%,阅读顺序编辑距离从0.085降至0.057

  • 该机制让模型接收到更接近人类阅读习惯的’理解路径’

DeepSeek又发新论文:让AI用“人类思维”理解图像精华内容

视觉理解的瓶颈不在于模型规模,而在于信息组织方式。DeepSeek-OCR 2正是从这一认知出发,提出了革命性的视觉因果流机制。

传统方法局限

主流视觉语言模型长期采用固定的像素扫描顺序,将图像按从左到右、从上到下的方式切分输入。这种方法在自然图片中尚可,但在表格、多栏文档、公式等结构化内容中暴露明显局限。固定的空间顺序无法反映标题与正文、行名与数值等语义层级关系,导致模型难以还原整体结构。

因果流创新

DeepSeek-OCR 2的核心是’视觉因果流’机制,让模型根据语义和逻辑关系动态处理图像。在视觉编码阶段引入语义与因果感知能力,通过改进的DeepEncoder V2对视觉单元间的依赖关系建模。模型会判断信息理解的先行性,对视觉token进行动态重排。

性能提升显著

实验结果表明,该机制在表格解析、多栏文档理解和公式识别等任务中表现突出。相较于前代DeepSeek-OCR,整体性能提升3.73%,阅读顺序的编辑距离从0.085降至0.057。这证明新机制能有效选择和排列视觉标记,提升结构化理解能力。

视觉因果流机制为AI视觉理解提供了全新思路,不再盲目追求模型规模扩张,而是专注于优化信息处理路径。这一突破或将推动多模态智能在更深层次视觉理解中取得更大进展,期待其在更多复杂场景的应用探索。

内容由AI生成
0
扫一下,分享更方便,购买更轻松
0评论

当前文章无评论,是时候发表评论了
提示信息

取消
确认
评论举报

最新文章 热门文章