Claw Web Fetch
将网页、GitHub README、Reddit帖子转为Markdown
安装使用
复制下面这段提示词发给你的 AI(Claude / Cursor / TRAE / Codex / WorkBuddy 等),它会自动帮你完成安装:
帮我安装这个 AI Skill:Claw Web Fetch。 它的用途是:将网页、GitHub README、Reddit帖子转为Markdown 完整的 Skill 内容见:https://321skill.com/skills/claw-web-fetch-x/raw/index.md 请读取该页面内容,如果是 SKILL.md 格式直接安装,如果是 README 提炼核心 prompt 后安装。
提示词包含完整的 Skill 内容链接,AI 读取后即可完成安装。你也可以 查看完整内容 确认无误。
使用示例
'请帮我抓取这个GitHub仓库的README,转换为Markdown:https://github.com/example/repo',AI会执行 `clawfetch https://github.com/example/repo` 命令,返回该仓库的README内容(Markdown格式),然后你可以直接复制使用或让AI进一步分析。
介绍
你是否经常需要从网页、GitHub仓库或Reddit讨论中提取内容,但原始HTML难以阅读、不便保存?Claw Web Fetch 正是为了解决这个问题而生的轻量级工具。它基于 clawfetch npm CLI 封装,能够一键将网页、GitHub README、Reddit 线程等常见来源的内容抓取并转换为清晰、结构化的 Markdown 格式,方便你直接阅读、存档或输入到 AI 工具中进一步处理。
使用非常简单:在终端中运行 npx clawfetch <目标URL> 即可。支持直接传入 GitHub 仓库地址、Reddit 帖子链接或任意公开网页 URL,工具会自动识别内容类型并输出对应的 Markdown。你也可以在 AI 代理(如 Claude、Cursor)中调用该命令,让 AI 帮你抓取并分析网页内容,无需手动复制粘贴。
这款工具特别适合内容创作者、数据分析师、全栈开发者以及需要频繁从网络获取文本素材的学术研究者。比如,你可以在写公众号文章时抓取竞品产品的 README 作为参考,或在研究市场趋势时批量抓取 Reddit 讨论帖收集用户反馈,亦或是在开发 AI 应用时快速获取网页内容作为上下文输入。
使用建议:注意遵守目标网站的 robots.txt 和访问频率限制,避免对服务器造成压力。对于需要登录或 JavaScript 渲染的动态页面,该工具无法抓取,建议先使用浏览器开发者工具获取静态版本。另外,抓取内容仅限个人学习或合法用途,请勿用于侵犯版权或违反平台规则的行为。
核心特点
与通用网页抓取工具不同,Claw Web Fetch 专门针对网页、GitHub README、Reddit 线程这三种常见内容源做了优化,输出为干净整洁的 Markdown 而非原始 HTML,并且可通过 npm 一键安装,在终端或 AI 代理中直接调用,无需配置浏览器环境。
注意事项
不适合抓取需要登录、动态渲染(JavaScript 生成)或反爬虫机制严格的页面。
常见问题
Claw Web Fetch 支持哪些网站?
主要支持公开网页、GitHub 仓库 README 以及 Reddit 帖子,其他静态 HTML 网页也可正常抓取。
如何安装 Claw Web Fetch?
通过 npm 全局安装:`npm install -g clawfetch`,然后直接在终端使用 `clawfetch <URL>` 命令。
给 AI 助手的安装指引
如果你的 AI 编程助手(Claude Code、Cursor、TRAE 等)能看到这个页面,把下面这段发给它即可自动完成安装:
请访问 https://321skill.com/skills/claw-web-fetch-x/raw/index.md 读取 Claw Web Fetch 的原始 Skill 定义(Markdown 格式),按其中说明在我的环境里完成安装和配置。
AI 可直接读取的原始 Markdown 地址:/skills/claw-web-fetch-x/raw/index.md(查看排版版本)