サイト全体を LLM 向けの Markdown や構造化データに変換するスクレイピング API。
Crawl4AI
为 LLM 设计的开源网页爬虫与抓取工具。
- リポジトリ
- unclecode/crawl4ai
- スター
- ★ 85,722
- フォーク
- 8,909
- 言語
- Python
- ライセンス
- Apache-2.0
- 最終更新
- 2026-10-15
- アクセス数
- 0
クローラー
関連プロジェクト
百度 PaddlePaddle の OCR ツールキット。100 以上の言語、PP-OCR、ドキュメント解析を一つにまとめている。
PDF などの文書を高品質に Markdown／JSON へ変換。LLM 向けコーパス作りに最適。
IBM が公開したドキュメント解析ツール。PDF や Office ファイルを構造化データに変換する。
微软出品，把 Office、PDF 等文件转为 Markdown 供 LLM 使用。
🕷️ An adaptive Web Scraping framework that handles everything from a single request to a full-scale crawl! Don't be shy, join here: https://discord.gg/EMgGbDceNQ and follow here for daily tips and tricks: https://x.com/