基础资料 · 开发建站

Crawl4AI

面向大模型与 RAG 的开源网页爬虫。

Crawl4AI 是一个功能丰富的网页爬虫与抓取工具，面向 RAG 管道或直接输入大模型，支持生成干净 Markdown、结构化提取、高级浏览器控制与并行爬取。

开发建站

01 / 概览

Crawl4AI 是一个功能丰富的网页爬虫与抓取工具，面向 RAG 管道或直接输入大模型，支持生成干净 Markdown、结构化提取、高级浏览器控制与并行爬取。

02 / 工具截图

已人工审核并发布的官网页面快照。

收录时保存的官方网站画面2026-09-01

从观猹产品页本地化的产品展示画面2026-09-01

03 / 核心功能

为 RAG 管道或直接输入大模型生成干净 Markdown。

使用 CSS、XPath 或基于 LLM 的提取解析重复模式。

通过钩子、代理、隐身模式和会话复用控制浏览器。

支持并行爬取、分块提取和实时应用场景。

面向大型表格提供智能分块表格提取。

支持灵活代理配置，并改进 Docker API 与原始 HTML 处理。

04 / 同类产品