【开源初探】基于 Qwen2.5VL的文档解析工具:docext

【开源初探】基于 Qwen2.5VL的文档解析工具:docext

基于Qwen2.5VL的文档解析神器docext,无需OCR即可智能提取文档信息,支持PDF转Markdown、表格识别等强大功能。

核心内容:
三大核心功能:文档转换、信息提取和智能文档处理排行榜
特色文档转换能力:LaTeX公式识别、智能图片描述、签名检测等
全面的基准测试平台,评估7大文档智能处理任务

【开源初探】基于 Qwen2.5VL的文档解析工具:docext

源码地址:https://github.com/NanoNets/docext[1]

概述

docext 是一个由视觉语言模型(vlm)提供支持的全面的本地文档智能工具包。vlm 使用的是基于 Qwen2.5VL-3B 的模型,应该是在此模型基础上进行的微调。

它提供了三个核心功能:

1.pdf/image 转 markdown:将文档转换为具有智能内容识别的结构化标记,包括 LaTeX 方程、签名、水印、表和语义标记。

2.文档信息提取:从发票、护照和其他文档类型等文档中无 ocr 地提取结构化信息(字段、表等),并进行置信度评分。

3.智能文档处理排行榜(https://idp-leaderboard.org/):一个全面的基准测试平台,跟踪和评估视觉语言模型在OCR、关键信息提取(Key Information Extraction, KIE)、文档分类、表提取和其他智能文档处理任务中的性能。

核心特点

文档转换

(1) latex 公式识别,行内和块的公式使用 latex 表示 输入:

【开源初探】基于 Qwen2.5VL的文档解析工具:docext

官方案例部分输出结果如下:

【开源初探】基于 Qwen2.5VL的文档解析工具:docext

(2) 智能图片描述,对于所有图片,使用去替代原来图片中的内容; 输入:

【开源初探】基于 Qwen2.5VL的文档解析工具:docext

官方案例部分输出结果如下:

【开源初探】基于 Qwen2.5VL的文档解析工具:docext

(3)签名/水印/页码的检测,检测和标记文档中的签名、水印和页码,并分别放入到、、<pagenumber></pagenumber>中; 输入:

【开源初探】基于 Qwen2.5VL的文档解析工具:docext

官方案例部分输出结果如下:

【开源初探】基于 Qwen2.5VL的文档解析工具:docext

输入:

【开源初探】基于 Qwen2.5VL的文档解析工具:docext

官方案例部分输出结果如下 :

【开源初探】基于 Qwen2.5VL的文档解析工具:docext

(4) 复选框和单选按钮:将表单复选框和单选按钮转换为标准化的 Unicode 符号(☐, ☑, ☒) 输入:

【开源初探】基于 Qwen2.5VL的文档解析工具:docext

官方案例部分结果如下:

【开源初探】基于 Qwen2.5VL的文档解析工具:docext

(5) 表格检测:将复杂的表格转换成 html 的表格表示 输入:

【开源初探】基于 Qwen2.5VL的文档解析工具:docext

官方案例部分结果如下:

【开源初探】基于 Qwen2.5VL的文档解析工具:docext

智能文档处理排行榜

该基准评估七个关键文档智能挑战的性能;

【开源初探】基于 Qwen2.5VL的文档解析工具:docext

(1) 关键信息提取(KIE):从非结构化文档文本中提取结构化字段。

(2) 视觉问答(VQA):通过问答来评估对文档内容的理解。

(3) 光学字符识别(OCR):测量识别印刷和手写文本的准确性。

(4) 文档分类:评估模型对各种文档类型进行分类的准确性。

(5) 长文档处理:测试模型对冗长的、上下文丰富的文档的推理。

(6) 表提取:从复杂的表格格式中提取基准结构化数据。

(7) 可信度评分校准:评估模型预测的可靠性和置信度。

补充

工具提到可以输出可信度评分,从源码来看主要是将用户的输入以及大模型的输出结果+打分的 prompt 让大模型对用户的输入和大模型的输出结果打分。

[登录查看剩余 70% 内容](javascript:void (0);)

开源大模型开源大模型是什么意思开源大模型本地部署

分享:

【开源初探】基于 Qwen2.5VL的文档解析工具:docext

用微信扫描二维码

【开源初探】基于 Qwen2.5VL的文档解析工具:docext

用微信扫描二维码

【开源初探】基于 Qwen2.5VL的文档解析工具:docext

用微信扫描二维码

【开源初探】基于 Qwen2.5VL的文档解析工具:docext

用微信扫描二维码

53AI,企业落地大模型首选服务商

产品:场景落地咨询+大模型应用平台+行业解决方案

承诺:免费POC验证,效果达标后再合作。零风险落地应用大模型,已交付160+中大型企业

上一篇:阿里云正式开源 LoongSuite:打造 AI 时代的高性能低成本可观测采集套件下一篇:coze-studio v0.2.1版本全面更新解析及实战应用指南

返回列表

相关资讯

2026-07-25 Codex 终于能自由切模型了:Claude、Kimi、Grok、GPT 都能接进来2026-07-25 AI 数据最难搞的 Harness 工程,被北大开源了!2026-07-24 【开源项目】AI写的文章满篇AI味?这个工具直接在Word里帮你标好改哪2026-07-24 Gemma 4 助力 Cue 打造极速端侧语音智能体交互体验2026-07-24 阿里开源0.8B文档解析模型,端到端模型首次超越流水线方法2026-07-24 吴恩达开源 OpenWorker:一个交付成品而不是对话的 AI 智能体桌面应用2026-07-23 梁文锋四小时投资人会议实录2026-07-22 微软开源 Resource2Skill:把教程、代码和文档“炼”成 Agent Skill

【开源初探】基于 Qwen2.5VL的文档解析工具:docext

【开源初探】基于 Qwen2.5VL的文档解析工具:docext

联系获取

【开源初探】基于 Qwen2.5VL的文档解析工具:docext

【开源初探】基于 Qwen2.5VL的文档解析工具:docext

联系获取

160+中大型企业正在使用53AI

[立即咨询](javascript:void(0))[预约演示](javascript:void(0))

把握AI发展的机遇,共同探索、共同进步 2025-01-22如何打造基于GenAI的员工服务机器人 2025-01-22

【开源初探】基于 Qwen2.5VL的文档解析工具:docext

前沿技术开源大模型新闻资讯

coze-studio v0.2.1版本全面更新解析及实战应用指南

2026-6-22 8:22:15

前沿技术开源大模型新闻资讯

阿里云正式开源 LoongSuite:打造 AI 时代的高性能低成本可观测采集套件

2026-6-22 10:11:52

0 条回复 A文章作者 M管理员
    暂无讨论,说说你的看法吧
购物车
优惠劵
搜索