openclaw-ultra-scraping
一款集强大网页抓取、反爬绕过与数据提取于一体的智能代理工具。
安装使用
复制下面这段提示词发给你的 AI（Claude / Cursor / TRAE / Codex / WorkBuddy 等），它会自动帮你完成安装：
帮我安装这个 AI Skill：openclaw-ultra-scraping。 它的用途是：一款集强大网页抓取、反爬绕过与数据提取于一体的智能代理工具。 完整的 Skill 内容见：https://321skill.com/skills/openclaw-ultra-scraping/raw/index.md 请读取该页面内容，如果是 SKILL.md 格式直接安装，如果是 README 提炼核心 prompt 后安装。
提示词包含完整的 Skill 内容链接，AI 读取后即可完成安装。你也可以 查看完整内容 确认无误。
使用示例
“帮我抓取 https://xxx.com 上所有产品的名称和价格，这个网站有 Cloudflare 保护。” 它会自动调用 StealthyFetcher，绕过防护，提取指定 CSS 选择器下的数据，并以 JSON 格式返回给你。如果需要对抗更高级的指纹检测，它会提示你安装 CloakBrowser 组件。
介绍
OpenClaw Ultra Scraping 是一个专为 AI Agent 设计的自适应网页抓取框架，旨在解决传统爬虫在面对复杂反爬机制（如 Cloudflare Turnstile、验证码）时束手无策的难题。它通过内置的隐身浏览器技术和智能绕过策略，让用户能够轻松抓取那些通常难以访问的网站数据。
使用方式非常灵活，既可以通过简单的命令行脚本快速上手，执行如提取页面内容、抓取链接、并发爬取多页等任务；也可以通过 Python API 进行深度集成和复杂逻辑定制。框架提供了从普通 HTTP 请求到动态渲染、再到企业级反检测的多种抓取器（Fetcher），并能根据失败情况自动升级策略。
这个工具非常适合数据分析师、市场研究人员、开发者以及任何需要从受保护的网站中自动化获取结构化数据的用户。无论是监控竞品价格、收集新闻资讯，还是构建数据集，它都能提供强大支持。
与同类网页抓取工具相比，OpenClaw Ultra Scraping 的核心优势在于其“开箱即用”的反爬绕过能力。它并非简单地提供浏览器自动化，而是深度集成了针对 Cloudflare、Kasada、FingerprintJS 等高级防护系统的专项解决方案，并支持代理轮换、人类行为模拟等功能，大大降低了配置和调试的门槛。
核心特点
核心区别在于其分层、自动升级的抓取策略和针对企业级反爬系统（如 Kasada, reCAPTCHA Enterprise）的专项“超隐身”模式，无需用户手动处理复杂的验证码或指纹对抗。
注意事项
不适合需要极低延迟或对资源消耗（如内存）有严格限制的超大规模、高频抓取场景。
常见问题
这个工具能绕过 Cloudflare 5秒盾吗？
可以，使用 `--stealth --solve-cloudflare` 参数即可自动处理 Turnstile 等 Cloudflare 挑战。
抓取动态加载（JS渲染）的网页用什么模式？
使用 `--dynamic` 参数或 `DynamicFetcher`，它会启动无头浏览器完整渲染页面。
给 AI 助手的安装指引
如果你的 AI 编程助手（Claude Code、Cursor、TRAE 等）能看到这个页面，把下面这段发给它即可自动完成安装：
请访问 https://321skill.com/skills/openclaw-ultra-scraping/raw/index.md 读取 openclaw-ultra-scraping 的原始 Skill 定义（Markdown 格式），按其中说明在我的环境里完成安装和配置。
AI 可直接读取的原始 Markdown 地址：/skills/openclaw-ultra-scraping/raw/index.md（查看排版版本）