サイト全体を LLM 向けの Markdown や構造化データに変換するスクレイピング API。
MinerU 注目
PDF などの文書を高品質に Markdown／JSON へ変換。LLM 向けコーパス作りに最適。
- リポジトリ
- opendatalab/MinerU
- スター
- ★ 81,920
- フォーク
- 6,788
- 言語
- Python
- 最終更新
- 2026-10-17
- アクセス数
- 2
PDF解析
関連プロジェクト
百度 PaddlePaddle の OCR ツールキット。100 以上の言語、PP-OCR、ドキュメント解析を一つにまとめている。
IBM が公開したドキュメント解析ツール。PDF や Office ファイルを構造化データに変換する。
微软出品，把 Office、PDF 等文件转为 Markdown 供 LLM 使用。
🕷️ An adaptive Web Scraping framework that handles everything from a single request to a full-scale crawl! Don't be shy, join here: https://discord.gg/EMgGbDceNQ and follow here for daily tips and tricks: https://x.com/
为 LLM 设计的开源网页爬虫与抓取工具。