告别“机械扫描”:DeepSeek-OCR-2用“视觉因果流”让AI像人一样读懂文档

一、DeepSeek-OCR-2 在做什么:从"扫描图像"到"阅读理解"

如果把之前的 OCR 系统比作"只会拍照的机器",那 DeepSeek-OCR-2 更像是"先看整页结构,再按语义顺序把字抠出来"的"有策略阅读者"。

官方论文里给了一个清晰的结构:DeepSeek-OCR-2 使用了一种叫 Visual Causal Flow(视觉因果流)的新编码方式,核心是:

先用类似"注意力扫描"的机制看全图,先定位标题、段落、表格、图片、公式等区域;

再根据语义,决定"接下来该读哪里""先读哪个 token、后读哪个 token",按人类阅读顺序生成一条因果流序列(causal flow tokens)。

与传统模型从左到右、逐像素或逐块扫描不同,DeepSeek-OCR-2 在 OmniDocBench v1.5 基准中,只用更少的视觉 token(256--1120 个)就拿到了 91.09% 的综合得分,比上一代提升约 3.73%;阅读顺序编辑距离从 0.085 降到 0.057,说明它对"逻辑结构"的理解明显更贴近人类。

此外,官方还给出了很夸张的吞吐指标:单张 A100 就能做到每天约 20 万页文档,推理时 token 生成速度可达 2500 tokens/s,这为大规模文档数字化与知识抽取提供了一个非常实用的技术基础。

二、核心创新:Visual Causal Flow + DeepEncoder V2

DeepSeek-OCR-2 的最大创新在于"让模型学会'怎么读',而不是'按顺序扫'"。这主要体现在:

视觉编码器升级:从 CLIP ViT-300M 换成 Qwen2-0.5B(约 500M 参数)的 DeepEncoder V2;

可学习的"因果查询"(learnable causal flow queries)作为视觉 token 之后的"后缀",指导模型按合理顺序阅读文档。

官方论文与博文中把这种机制概括为:

先通过双向注意力机制做全局感知,明确"页面上有哪些块""各自大概在哪儿";

再生成"因果流 token",模拟人类"扫视 → 定位 → 深入细节"的阅读路径;

即便面对报纸、教材、论文、报告等复杂排版,也能更好地还原出合理的阅读顺序。

三、性能提升: OmniDocBench 91.09%,编辑距离大幅降低

权威文档理解基准 OmniDocBench v1.5 的测试结果,是这次发布最被引用的一组数据:

综合得分:91.09%,较前代提升约 3.73 个百分点;

阅读顺序编辑距离:从 0.085 降到 0.057;

在更少的视觉 token 预算下,实现更高精度的结构还原。

DeepSeek 团队也在官方博客与 GitHub 仓库中展示了吞吐与延迟结果:单卡 A100 环境下,每秒能生成约 2500 个 token,换算成整页文档处理能力,大概是一天 20 万页文档的级别。这对要同时兼顾"精度"和"成本"的工程化落地非常关键。

四、能力边界:它能做什么、还有哪里需要补位?

结合 DeepSeek 官方的功能介绍与 Demo,可以大致勾勒出它的能力边界:

更擅长:学术 PDF / 技术报告 / 论文 / 教材 / 说明书 / 报纸 / 周刊;

更擅长:版面结构清晰、图表与文字共存、公式与表格较多的场景;

更擅长:将多模态文档(PDF)转成结构化文本或 Markdown,方便接大模型做问答与检索;

目前仍需要人介入:手写、严重模糊、极度复杂嵌套的公式与图表、跨页跨栏的极端布局仍需人工兜底。

五、工程与开源:论文、模型与 Demo 都已公开

为了让人员尽快上手,DeepSeek 团队同步做了三件事:

论文:发布了《DeepSeek-OCR-2: Visual Causal Flow》,对架构与实验细节做了系统说明;

模型:开源了 DeepSeek-OCR-2 权重与推理代码,并给出完整运行与微调指南;

Demo:提供了一个快速试用 Demo,让用户直接在 Hugging Face 页面体验"像人一样读文档"的效果。

整体来看,DeepSeek-OCR-2 的意义不仅是一个 OCR 模型的迭代,而是让"文档理解"从"识别文字"升级到"按逻辑阅读",这对知识库构建、企业档案数字化、科研数据清洗等场景都是一个非常有力的新基座。

相关链接:

Github:https://github.com/deepseek-ai/DeepSeek-OCR-2

HF:https://huggingface.co/deepseek-ai/DeepSeek-OCR-2

论文:https://github.com/deepseek-ai/DeepSeek-OCR-2/blob/main/DeepSeek_OCR2_paper.pdf

相关推荐
开开心心就好17 小时前
免费音频转文字工具,绿色版离线多模型可用
人工智能·windows·计算机视觉·计算机外设·ocr·excel·语音识别
开开心心_Every2 天前
全屏程序切换工具,激活选中窗口快速切换
linux·运维·服务器·pdf·ocr·测试用例·模块测试
2401_836235862 天前
名片识别产品:技术要点与应用场景深度解析
人工智能·科技·深度学习·ocr
njsgcs4 天前
glm-ocr ollama使用 python
ocr
开开心心就好4 天前
轻松鼠标连, 自定义区域模仿人手点击
人工智能·windows·物联网·计算机视觉·计算机外设·ocr·excel
littleshimmer4 天前
基于 C++ + Qt6 实现一款本地离线 OCR 工具(SnapOCR)
ocr
AI周红伟6 天前
周红伟:企业大模型微调和部署, DeepSeek-OCR v2技术原理和架构,部署案例实操。RAG+Agent智能体构建
大数据·人工智能·大模型·ocr·智能体·seedance
kongba0078 天前
如何在本地创建一个OCR工具,帮你识别文档,发票,合同等细碎的内容,并将结果给大模型整理格式输出。 经验工作流。给大模型生成代码就能直接跑。
大数据·ocr
gzroy8 天前
华为昇腾服务器部署Paddle OCR VL模型及推理服务
ocr·paddle