mcp
一个支持网页抓取与链接提取的MCP服务器工具。
安装使用
复制下面这段提示词发给你的 AI(Claude / Cursor / TRAE / Codex / WorkBuddy 等),它会自动帮你完成安装:
帮我安装这个 AI Skill:mcp。 它的用途是:一个支持网页抓取与链接提取的MCP服务器工具。 详细介绍见:https://321skill.com/skills/mcp-mcp-server-webscan/ 请根据该页面的说明完成安装。
使用示例
“帮我抓取并总结一下这个科技新闻页面的主要内容。”,它会调用此Skill抓取指定URL的文本,然后为你生成摘要。或者
对AI说:“分析一下这个产品官网的所有出站链接。”,它会提取页面上的所有链接并列出,帮助你进行竞品或SEO分析。
介绍
这个Skill是一个MCP(Model Context Protocol)服务器,核心功能是帮助用户从网页中抓取内容和提取链接。它解决了在AI工作流中需要快速获取网页原始信息或分析页面链接结构的痛点。
使用时,你需要先安装并运行这个MCP服务器,然后在支持的AI客户端(如Claude Desktop)中配置连接。之后,你就可以在AI对话中直接调用相关工具,例如请求抓取某个URL的文本内容,或者获取该页面上的所有链接。
它非常适合需要将网页信息作为上下文进行分析、整理或进一步处理的各类开发者和内容工作者。无论是为了研究、数据收集还是内容聚合,这个工具都能简化流程。
建议在遵守目标网站robots协议和相关法律法规的前提下使用。对于需要处理JavaScript动态渲染内容的复杂页面,可能需要结合其他工具。
核心特点
作为MCP服务器,它能被Claude等支持MCP的AI原生调用,将网页抓取能力无缝集成到AI对话工作流中,无需切换工具或手动复制粘贴。
注意事项
不适合需要抓取大量受反爬机制保护的网站或处理高度动态渲染(如复杂SPA)的网页内容。
常见问题
这个工具能抓取需要登录的网页吗?
通常不支持,它是一个基础的网页抓取工具,主要处理公开可访问的页面。
抓取速度如何?
速度取决于目标网站响应和网络状况,适合中小规模的抓取需求。