Project Icon

pdfdeal

PDF文本提取与优化工具 支持多种OCR引擎

pdfdeal是一个开源的PDF处理工具,专注于提取和优化文本内容。该工具支持多种OCR引擎,包括Doc2X,可实现PDF文本提取、图像文字识别和格式优化。pdfdeal支持多种文件格式,并提供与graphrag等检索增强生成(RAG)工具的集成指南,有助于提高知识库构建效率。

pdfdeal

更好的RAG效果!


Ubuntu上的包测试 Windows上的包测试 MacOS上的包测试

下载量 GitHub许可证 PyPI - 版本 GitHub仓库星标


📄文档

🗺️ ENGLISH | 简体中文

更简单易用地处理PDF,利用Doc2X强大的文档转换能力进行保留格式的文件转换/RAG增强。

介绍

Doc2X支持

Doc2X是一款新型的通用文档OCR工具,可以将图像或PDF文件转换为带有公式和文本格式的Markdown/LaTeX文本。在大多数场景下,它的表现优于类似工具。pdfdeal提供了抽象封装的类来使用Doc2X进行请求。

处理PDF

使用各种OCR或PDF识别工具识别图像并将其添加到原始文本中。您可以将输出格式设置为PDF,这将确保识别的文本在新PDF中保持与原始页码相同。它还提供了各种实用的文件处理工具。

使用Doc2X转换和预处理PDF后,与graphragDifyFastGPT等知识库应用一起使用时,可以获得更好的识别率。

案例

graphrag

请参阅如何与graphrag一起使用它不支持识别pdf,但您可以使用CLI工具doc2x将其转换为txt文档以供使用。

Fastgpt/Dify或其他RAG系统

对于知识库应用,您可以使用pdfdeal内置的各种文档增强功能,如将图像上传到远程存储服务、按段落添加换行等。请参阅与RAG应用集成

RAG系统插件集成

文档

详情请参阅文档

或查看文档仓库pdfdeal-docs

快速开始

详情请参阅文档

安装

从PyPI安装:

pip install --upgrade pdfdeal

使用Doc2X作为PDF处理工具

from pdfdeal import Doc2X
from pdfdeal import get_files

client = Doc2X()
file_list, rename = get_files(path="tests/pdf", mode="pdf", out="pdf")
success, failed, flag = client.pdfdeal(
    pdf_file=file_list,
    output_path="./Output/test/multiple/pdfdeal",
    output_names=rename,
)
print(success)
print(failed)
print(flag)

使用pytesseract作为OCR引擎

使用"pytesseract"时,请确保先安装tesseract

pip install 'pdfdeal[pytesseract]'
from pdfdeal import deal_pdf, get_files

files, rename = get_files("tests/pdf", "pdf", "md")
output_path, failed, flag = deal_pdf(
    pdf_file=files,
    output_format="md",
    ocr="pytesseract",
    language=["eng"],
    output_path="Output",
    output_names=rename,
)
for f in output_path:
    print(f"已将处理后的文件保存至 {f}")

详细信息请参阅在线文档。

项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

白日梦AI

白日梦AI提供专注于AI视频生成的多样化功能,包括文生视频、动态画面和形象生成等,帮助用户快速上手,创造专业级内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

讯飞绘镜

讯飞绘镜是一个支持从创意到完整视频创作的智能平台,用户可以快速生成视频素材并创作独特的音乐视频和故事。平台提供多样化的主题和精选作品,帮助用户探索创意灵感。

Project Cover

讯飞文书

讯飞文书依托讯飞星火大模型,为文书写作者提供从素材筹备到稿件撰写及审稿的全程支持。通过录音智记和以稿写稿等功能,满足事务性工作的高频需求,帮助撰稿人节省精力,提高效率,优化工作与生活。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具,简化了选题、文献检索至论文撰写的整个过程。通过简单设定,平台可快速生成高质量论文大纲和全文,配合图表、参考文献等一应俱全,同时提供开题报告和答辩PPT等增值服务,保障数据安全,有效提升写作效率和论文质量。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号