小红书FireRed-OCR 2B 图片和PDF转md 懒人整合包

FireRed-OCR

github地址:github.com/FireRedTeam...

FireRed-OCR是一个系统化的框架,旨在将通用的大型视觉语言模型 (LVLM) 专门化为高性能、像素级精确的结构化文档解析专家。

通用虚拟语言模型在处理复杂文档时经常会遇到"结构幻觉"(例如,行排列紊乱、出现虚构公式)。FireRed-OCR 通过将文本生成范式从"印象式"转变为"结构工程"来解决这个问题

主要特点

  • 结构完整性:该模型利用格式约束 GRPO(组相对策略优化),强制执行严格的语法有效性,消除未闭合的表格或无效的 LaTeX 公式等常见错误。
  • "几何 + 语义"数据工厂:一种新型数据引擎,利用几何特征聚类多维标记来合成平衡数据集,有效处理长尾布局。

渐进式培训流程:

  • 多任务预对齐:建立空间基础。
    专业 SFT:标准化全图像 Markdown 输出。
    格式约束的GRPO:通过强化学习进行自我纠正

使用方式

网盘下载并解压后,双击start.bat

等待终端启动

浏览器打开localhost:7860

选择图片,点击底部的开始OCR

然后查看实时进度,等待md结果

解析完成,可以点击下载md,使用自己的编辑器查看效果

也可以直接复制识别结果中的文本内容

点击红框区域可以下载文件

Tips

点击此处 网盘下载

注意,FireRed-OCR默认不支持pdf转md,只支持图片转md

同样的FireRed-OCR只处理文本等内容,如果遇到图表等元素,不会像paddleocr一样进行处理和md引用

实际测试,图片转md需要显存4GB左右,但是PDF转md显存需要至少8GB起,并且时间会比价久

目前多图片处理还没有进行测试,只是占位

另外FireRed-OCR是端到端的ocr类别,建议有显卡优先尝试,只有cpu不太适合

其他补充说明

1.懒人包地址如果打不开,可以试试关闭wifi,使用手机流量尝试,如果还是打不开,那就是能谷歌才能打开(已测试部分地区无法打开)

2.如果遇到多个zip文件下载,那是压缩分卷,需要下载全部的zip,然后全部一起解压缩,才会得到一个最终文件(不了解的可以查询关键词 压缩分卷)

3.打开项目优先localhost:端口,其次尝试127.0.0.1:端口,如果还是打不开,建议使用chrome等主流浏览器其他待定

相关推荐
ZzT9 小时前
把 AI Coding 工作流做成插件:资产、契约与运行时的三层拆分
aigc·openai·ai编程
技术传感器14 小时前
让 Hermes 自动完成一个软件需求:从 Issue 到 PR 的 AI 开发流水线
人工智能·架构·aigc·需求分析·issue
NutShell Wang15 小时前
「音画同生」时代开启:2026 年 8 月 AI 视频生成四大发布复盘
人工智能·开源·aigc·ai agent·智能体·vibe coding
奈斯先生Vector16 小时前
AI 视频不是会动的图片:用 Shot Contract、时间码与音画质检构建可交付流水线
人工智能·重构·架构·prompt·aigc·音视频
leeyi17 小时前
Agent 调了删库工具怎么办:5 层防线——DeepFlux 工具安全纵深防御(第84篇-E70)
aigc·agent·ai编程
DS随心转小程序18 小时前
AI 导出鸭重构转化链路,全面优化腾讯元宝输出 word 文档办公效率
人工智能·重构·aigc·word·豆包·deepseek·ai导出鸭
神奇霸王龙20 小时前
Agent 沙箱横评:trace、幂等、边界三道关工程实测
python·ai·aigc·agent·ai编程·ai写作
王莹月20 小时前
全店商品图风格怎么统一?生图API 用 nano banana pro 批量出同一套视觉
gpt·ai·chatgpt·ai作画·aigc·agi
DS随心转小程序2 天前
借助 AI 导出鸭简化各类办公场景下文心输出 word 文档全流程操作
人工智能·aigc·word·豆包·deepseek·ai导出鸭
m0_547486662 天前
《人工智能通识基础与AIGC应用》全套PPT课件2026
人工智能·aigc