usescraper
基于TypeScript的MCP服务器,用于抓取网页内容。
安装使用
复制下面这段提示词发给你的 AI(Claude / Cursor / TRAE / Codex / WorkBuddy 等),它会自动帮你完成安装:
帮我安装这个 AI Skill:usescraper。 它的用途是:基于TypeScript的MCP服务器,用于抓取网页内容。 完整的 Skill 内容见:https://321skill.com/skills/usescraper/raw/index.md 请读取该页面内容,如果是 SKILL.md 格式直接安装,如果是 README 提炼核心 prompt 后安装。
提示词包含完整的 Skill 内容链接,AI 读取后即可完成安装。你也可以 查看完整内容 确认无误。
使用示例
“帮我分析一下这个竞争对手产品页面的主要功能描述,链接是 https://example.com/product。”,它会调用 usescraper 抓取该页面的主要内容,并为你总结出核心功能点。或者,你可以说:“我想写一篇关于Web3趋势的文章,请从这几个链接中提取关键观点。”
介绍
usescraper 是一个基于 Model Context Protocol (MCP) 的服务器,专为从网页中提取结构化内容而设计。它解决了在AI工作流中需要实时获取外部网页信息的问题,让AI助手能够直接读取和分析网页内容,而无需用户手动复制粘贴。
使用时,您需要将其作为MCP服务器配置到兼容的AI客户端(如Claude Desktop)中。配置完成后,AI助手便能调用其功能,根据您提供的URL抓取指定网页的文本、标题或特定元素内容,并将结果整合到对话上下文中。
这个工具非常适合需要频繁从网页获取信息以辅助决策或内容创作的各类专业人士。例如,内容创作者可以快速搜集资料,数据分析师可以抓取公开数据,开发者可以获取API文档。
建议在需要获取公开、非敏感网页信息时使用。请注意遵守目标网站的 robots.txt 协议,避免高频请求对目标服务器造成压力,并确保您的使用符合相关法律法规和网站的使用条款。
核心特点
作为专为MCP生态设计的服务器,它能无缝集成到Claude等AI助手中,实现对话式网页抓取,而无需离开AI工作界面。其TypeScript实现也便于开发者根据需求进行二次开发和定制。
注意事项
不适合抓取需要复杂登录、动态渲染(如大量JavaScript生成)或反爬机制严格的网页内容。
常见问题
它能抓取需要登录的网页吗?
不能,它主要用于抓取公开可访问的网页静态内容。
抓取的内容会保存在哪里?
内容通常被临时加载到AI对话的上下文中,用于本次会话的分析和参考,具体持久化策略取决于AI客户端。
给 AI 助手的安装指引
如果你的 AI 编程助手(Claude Code、Cursor、TRAE 等)能看到这个页面,把下面这段发给它即可自动完成安装:
请访问 https://321skill.com/skills/usescraper/raw/index.md 读取 usescraper 的原始 Skill 定义(Markdown 格式),按其中说明在我的环境里完成安装和配置。
AI 可直接读取的原始 Markdown 地址:/skills/usescraper/raw/index.md(查看排版版本)