更小模型实现更强视觉 OCR

传送锚点

专为真实图像优化的多语种 OCR

NCSOFT 发布的 VARCO-VISION-2.0-1.7B-OCR,是当前视觉 OCR 模型里一个很值得关注的新成员。相较于那些动辄十几亿参数的多模态大家伙,这个模型只有 17 亿参数,但效果并没因为"瘦身"而缩水。

它不是普通的图文大模型(VLM),也不只是提取图片里的文字。它还有精确的字符定位能力,也就是说,不只是识别出"是什么字",还可以告诉你"在哪个地方"。输出直接给出每个字符和其边界框,这对于表单解析、票据采集或者文档重构这样对排版有需求的场景,是个工程师会喜欢的加分项。

多模态训练不等同于实际效果

很多多模态大模型看似能阅读图文,其实对正式的 OCR 工作并不友好。大模型容易"看懂但不准",特别是在分辨密集字符或检测视觉边角内容时表现不佳。而这种偏"轻"OCR 专用模型给出的结果恰恰更准确,响应更快,还少占内存,对资源控制严重的场合相当实用。

并且,一般 OCR 模型在英文文档和拉丁文本下没问题,但一遇韩语或中日韩混杂文本就经常抓瞎。VARCO-VISION-2.0-1.7B-OCR 明确支持韩语和英语,至少在亚洲场景中处理混合字体的实用性会比一票英语训练优先的模型更靠谱。

准确率比肩顶级选手

从多个标准数据集来看,它在 CORD、ICDAR2013、ICDAR2015 中的表现都很有竞争力。尤其在 CORD(文档场景)和 ICDAR2013(自然图像文字)中的准确率分别达到了 95.6 和 95.5 分,超过 PaddleOCR 和 EasyOCR,也胜过不少大模型。

NCSOFT 的策略其实很有意思。它们用 siglip2-so400m-patch16-384 作为视觉编码器,再结合 Qwen3-1.7B 语言基础模型做成这个低配高效的对照实验。从参数组合到最终配置,都是围绕"单一任务最大化"来设计的,这是一种比所谓通用大模型更聚焦也更节能的思路。

推荐场景与使用方式

这个模型非常适合跑在本地 GPU 设备上,不需要云端部署,不用额外爆显存。唯一需要注意的是,输入图片最好扩放到 2304 的长边分辨率,这样模型可以识别得更干净。

相关项目地址可见如下:

Hugging Face 模型页面:NCSOFT/VARCO-VISION-2.0-1.7B-OCR

https://huggingface.co/NCSOFT/VARCO-VISION-2.0-1.7B-OCR

完整论文报告已挂在 arXiv:

https://arxiv.org/abs/2509.10105

如果你正准备部署一个文件结构抽取系统、表格识别工具,或者移动 OCR 应用,重训练巨大模型不再必须。VARCO-VISION-2.0-1.7B-OCR 是个值得验证的替代方案。

相关推荐
维核科技2 小时前
本地优先的 AI:不联网也能跑的模型和智能体
人工智能
七夜zippoe2 小时前
Function Calling 深度解析:从参数定义到错误处理的完整实践
人工智能·ai·agent·function·calling
m0_734571768 小时前
深入理解人工智能 chatGPT的软件架构
人工智能
飞塔老梅子8 小时前
09. Codex 节省Token ❀ 老梅子学AI
人工智能·ai·token·模型·codex
HyperAI超神经8 小时前
扰动实验+迁移学习,MIT团队推出IRIS,用「指纹」重建单细胞信号传导历史
人工智能·深度学习·机器学习·迁移学习
前沿在线8 小时前
启元机器人亮相外滩大会,探索个人机器人健康服务新场景
人工智能·ai·大模型
haishikeji696_8 小时前
现成无人机管理系统源码|支持私有化部署、二次开发、政企投标、自动机库对接
人工智能·无人机·低空经济·无人机管理系统·飞控管理系统
汇智信科8 小时前
煤矿视频智能分析系统:基于 AI 视觉实现井下安全隐患实时监测与闭环管控
人工智能
h78813948 小时前
录音容易纪要难?录音转文字 + AI 纪要实测,提升会议效率
人工智能·powerpoint