crawl4ai

喂给 AI 的爬虫：把网页转成干净、AI 能直接读的 markdown，免费、不用 API key。

项目 unclecode/crawl4ai · 语言 Python · 协议 Apache-2.0

pip 安装

1. pip install crawl4ai
2. crawl4ai-setup 初始化
3. 用 async Crawler 抓取

安装：

pip install crawl4ai

使用 / 启动：

crawl4ai-setup

喂给 AI 的爬虫：把网页转成干净、AI 能直接读的 markdown，免费、不用 API key。

抓网页转成 AI 可读 markdown,喂给 LLM 做 RAG/分析

• 国内可用。Python≥3.10，装 playwright 走国内镜像。爬小红书/抖音会风控，建议配代理。

• GitHub：unclecode/crawl4ai
• 更多用法看官方 README 与 docs，踩坑搜 GitHub Issues