跳到主要内容
一条命令Apache-2.0⚪ 只看已实测

Crawl4AI

一句话:Crawl4AI 是一个给要喂数据给大模型的人用的开源爬虫,能把任意网页转成干净的 Markdown。

Crawl4AI 是一个给要喂数据给大模型的人用的开源爬虫,能把任意网页转成干净的 Markdown。

官方来源

本站不托管、不转存,一切以官方为准。

官方未提供可热链图标,此为生成的占位图C UncleCodehttps://github.com/unclecode/crawl4ai去官方页面
官方来源你将离开 AIWorksWell,前往 UncleCode。该网站不受我们控制,其内容、隐私与安全由其自行负责,请自行判断。

安装提示词

复制它,粘贴给你正在用的 AI(Claude Code、Codex、ChatGPT…),它会替你装好并验证。

48 行
我需要你帮我在我的机器上安装并运行一个软件。

【软件信息】
名称:Crawl4AI
用途:Crawl4AI 是一个给要喂数据给大模型的人用的开源爬虫,能把任意网页转成干净的 Markdown。
官方来源:https://github.com/unclecode/crawl4ai
许可:Apache-2.0
鼠标滚轮在框内上下查看,复制到的仍是完整提示词1509 字

复制 → 粘贴给你的 AI → 它替你装好

联系原作者(UncleCode)

属于这个软件的 bug 走作者自己的官方入口——那里才是他真正收得到的地方。我们只做传递,不代替作者答问题。

装失败了?

把你的报错原文贴进来——归类核实后会写回这里,下次别人的 AI 就少踩一次。免登录可用。

这条讲什么

What it is

Crawl4AI 是开源的网页抓取工具(Apache-2.0 许可),把任意网站转成适合大模型读的 Markdown。来源:https://crawl4ai.com/https://crawl4ai.com/

  • 输出直接是 Markdown,省掉清洗 HTML 那一步
  • 开源版走异步接口,适合批量抓取
  • 托管版另给抓取、抽取、搜索、问答四个端点

Getting it running

主推「复制提示词」——粘贴给你的 AI(Claude Code / Codex / ChatGPT)代装。人工兜底:pip 装包后跑一次初始化把浏览器内核装好,再用异步接口抓一个页面看 markdown 输出。验证:抓到的页面能打印出可读的 Markdown。来源:https://crawl4ai.com/https://crawl4ai.com/

以上坑来自 https://crawl4ai.com/https://crawl4ai.com/ 与它的官方 README。

来源与署名

Mentioned from:GitHub · 原作者 UncleCode(Apache-2.0)。

给 AI 的摘要

Crawl4AI 把网页抓下来转成适合大模型读的 Markdown,供 RAG、Agent 与数据流水线使用。官方给两条路:自己 pip 装、跑开源版,或用官方托管服务拿到抓取、抽取、搜索与问答四个端点。开源版走异步接口,抓完直接拿到 markdown 字段。

可独立摘取的答案段——AI 搜索引用出去的就是这一段。 · 本页复核于 2026-10-22

常见问题

它和普通爬虫框架差在哪?

它输出的是给大模型读的 Markdown,不是原始 HTML。

一定要用托管版吗?

不必。开源版 pip 装完就能跑,托管版只是省了运维。

避雷 / 已知坑

全部来自真实安装,会同步注入上方的提示词。

  • •抓取要守目标站条款与 robots,别默认可以随便抓。
  • •首次安装要额外下载浏览器内核,离线环境会失败。
  • •目标站反爬策略随时会变,抓不到不等于它坏了。

你可能也想试试

本站不存储、不镜像、不重新打包任何软件。所有获取方式指向作者自己的官方发布页。

本站内容未经任何应用商店审核,安装前请自行判断来源与许可,风险自负。