
Xiaomi-OCR-0
小米开源的 0.8B 轻量级多模态文档理解模型,文档解析、关键信息抽取与 OCR 视觉问答三合一
完全免费开源完全免费国产自研
8.4/10
访问官网 ↗核心功能
- 三能力合一:文档解析、关键信息抽取、OCR 视觉问答共享一套指令接口
- 0.8B 参数量,基于 Qwen3.5-0.8B,普通机器即可本地推理
- Real5-OmniDocBench 95.24 分居首,覆盖扫描、弯曲、翻拍、光照、倾斜五种干扰
- 1.7 亿条训练样本由专家投票与失败驱动合成自动产出
- 完整开源:权重、推理代码与浏览器 Demo 一并放出
- 提供 MCP 服务与 Agent Skill 工具包,可直接接入智能体
详细介绍
Xiaomi-OCR-0 是小米开源的 0.8B 轻量级多模态文档理解模型,基于 Qwen3.5-0.8B 训练,把文档解析、关键信息抽取(KIE)与 OCR 视觉问答(OCR-VQA)三件事统一到一个模型里,通过共享指令接口切换任务,不需要再拼接多个专用模型。它的思路有点反直觉:不靠堆参数,靠数据。训练用了 1.7 亿条样本,由专家共识投票、渲染引导校验与失败驱动合成自动化产出,用数据质量换模型规模。效果上,官方给出的成绩是 OmniDocBench v1.6 拿到 96.83 分(第 2,仅次于阿里 TeleOCR 的 96.87),而在更贴近真实场景的 Real5-OmniDocBench 上以 95.24 分居首——这项基准专门覆盖扫描、纸张弯曲、屏幕翻拍、光照不均、倾斜拍摄五种干扰场景,小米在这五项全部领先。技术报告里还有一个有意思的发现:课程学习带来正向迁移,理解类监督在解析能力成熟之后反哺解析,最高提升 0.64 分,实现轻量模型下的双重能力跃升。开源程度相当彻底:不仅公开 0.8B 权重与推理代码,还提供了开箱即用的浏览器交互式 Demo、MCP 服务与 Agent Skill 工具包,开发者可以低成本把文档解析与视觉问答接进自己的业务流程或智能体系统。对需要在本地或私有环境处理票据、合同、表单的场景来说,0.8B 这个体量意味着普通机器就能跑,不必为文档理解单独买算力。
优缺点
👍 优点
- 0.8B 就做到 1B 以下文档解析第一,本地部署门槛低到可以忽略
- 三合一省掉多模型拼接的工程复杂度,接口统一
- 连 MCP 服务和 Agent Skill 都给了,接进现有系统基本是复制粘贴
👎 缺点
- 只有文档理解能力,不做通用对话,不能替代通用多模态模型
- 综合榜单以 96.83 略低于阿里 TeleOCR 的 96.87
- GitHub 与 Hugging Face 在国内访问需要额外的网络条件
