Crawl4AI

Crawl4AI

开源的适用于大语言模型的网页爬虫与数据抓取工具。

66,481GitHub
应用介绍

- LLM 友好的输出:智能的 Markdown 格式,支持标题、表格、代码和引用提示。 - 高效快速:使用异步浏览器池,支持缓存,减少请求跳转。 - 完全掌控:可以自定义会话、代理、Cookies、用户脚本和钩子。 - 自适应智能:自动学习网站模式,只关注重要内容。 - 轻松部署:无需密钥,支持 CLI 和 Docker,适配云环境。 部署后,我们可以使用「局域网端口转发工具」,把其他应用的请求转发到「Crawl4AI」,获取爬虫后的结果了 😄。

应用截图
Screenshot 1
Screenshot 2
移动端截图
Mobile Screenshot 1
Mobile Screenshot 2
Mobile Screenshot 3
应用信息
版本
0.7.7
安装包大小
32.75 KB
更新时间
2025年11月25日
源代码
unclecode
平台支持
PC移动端
关键词
crawlerscraperllm