微信扫码
添加专属顾问
我要投稿
PDF转换神器来袭,一键将PDF文件转换为Markdown或EPUB,自动生成目录注释和引文对齐。 核心内容: 1. PDF-Craft工具介绍及安装 2. 将PDF文件转换为Markdown格式 3. 将PDF文件转换为EPUB格式
本公众号主要关注NLP、CV、LLM、RAG、Agent等AI前沿技术,免费分享业界实战案例与课程,助力您全面拥抱AIGC。
from pdf_craft import PDFPageExtractor, MarkDownWriter
extractor = PDFPageExtractor(
device="cpu", # If you want to use CUDA, please change to device="cuda:0" format.
model_dir_path="/path/to/model/dir/path", # The folder address where the AI model is downloaded and installed
)
with MarkDownWriter(markdown_path, "images", "utf-8") as md:
for block in extractor.extract(pdf="/path/to/pdf/file"):
md.write(block)
如果原始 PDF 中有插图(或表格、公式),则会在与保存图像相同的级别创建一个目录。
目录中的图片将在 MarkDown 文件中以相对地址的形式被引用。*.md``assets``*.md``assets
将 PDF 转换为 EPUB
首先创建PDF抽取对象
extractor = PDFPageExtractor(
device="cpu", # If you want to use CUDA, please change to device="cuda:0" format.
model_dir_path="/path/to/model/dir/path", # The folder address where the AI model is downloaded and installed
)
将抽取的内容送给LLM,生成EPUB文件
from pdf_craft import analyse
from pdf_craft import LLM
llm = LLM(
key="sk-XXXXX", # LLM 供应商提供的 key
url="https://api.DeepSeek.com", # LLM 供应商提供的 URL
model="deepseek-chat", # LLM 供应商提供的模型
token_encoding="o200k_base", # 进行 tokens 估算的本地模型名(与 LLM 无关,若不关心就保留 "o200k_base")
)
analyse(
llm=llm, # 上一步准备好的 LLM 配置
pdf_page_extractor=pdf_page_extractor, # 上一部准备好的 PDFPageExtractor 对象
pdf_path="/path/to/pdf/file", # PDF 文件路径
analysing_dir_path="/path/to/analysing/dir", # analysing 文件夹地址
output_dir_path="/path/to/output/files", # 分析结果将写入这个文件夹
)
output_dir_path
,表示扫描和分析的结果(会有多个文件)应该保存在哪个文件夹。
analysing_dir_path
,用来存储分析过程中的中间状态。
在分析结束后,将 output_dir_path
文件夹地址传给如下代码作为参数,即可最终生成 EPUB 文件。
首先,将PDF分页拆解成图片
其次,利用DocLayout-YOLO识别图片中的block元素,包括:页眉、页脚、段落、标题、图片、表格、图表、页码等信息
然后,利用layoutreader对block进行排序
接着,利用OnnxOCR,识别block中的文字
最后,将OCR识别的文字,输送给Deepseek,并通过特定信息(比如目录等)来构建书本的结构,最终生成带目录,分章节的 EPUB 文件。
这个解析和构建的过程中,会通过 LLM 读取每页的注释和引用信息,然后在 EPUB 文件中以新的格式呈现。
53AI,企业落地大模型首选服务商
产品:场景落地咨询+大模型应用平台+行业解决方案
承诺:免费场景POC验证,效果验证后签署服务协议。零风险落地应用大模型,已交付160+中大型企业
2025-05-21
Gemini接管搜索、全家桶秒变通用Agent ,以及Google Glass is so back!|直击Google I/O
2025-05-18
AI Studio 新增 Veo2 和 Imagen3.0 生成功能,中文支持有待优化
2025-05-16
万字长文:OCR/多模态大模型评测体系全景
2025-05-16
ollama 大版本0.7 发布,新引擎支持多模态模型
2025-05-15
退订即梦、可灵、Vidu、Mj,只因我有了Lovart
2025-05-15
全球首款设计Agent,Lovart在海外大火,马斯克亲自点赞
2025-05-14
破解RL训练崩溃难题,快手联合中科院、清华、南大提出多模态奖励模型R1-Reward!
2025-05-14
深度体验 Lovart:这才是AI Design Agent!设计领域终于迎来了它们的「神」
2024-09-12
2024-06-14
2024-06-17
2024-08-06
2024-08-30
2024-05-30
2024-11-28
2024-10-07
2024-10-16
2024-04-21