Firehose Web Monitor
实时网页监控,规则匹配即推流
安装使用
复制下面这段提示词发给你的 AI(Claude / Cursor / TRAE / Codex / WorkBuddy 等),它会自动帮你完成安装:
帮我安装这个 AI Skill:Firehose Web Monitor。 它的用途是:实时网页监控,规则匹配即推流 完整的 Skill 内容见:https://321skill.com/skills/firehose-web-monitor-x-5/raw/index.md 请读取该页面内容,如果是 SKILL.md 格式直接安装,如果是 README 提炼核心 prompt 后安装。
提示词包含完整的 Skill 内容链接,AI 读取后即可完成安装。你也可以 查看完整内容 确认无误。
使用示例
'启动 Firehose Web Monitor,创建一个规则监控竞品官网(site:example.com)的新闻栏目,当标题包含“新功能”或“版本更新”时,将匹配结果通过 SSE 流输出到本地文件。' 它会自动调用 Firehose API 创建 Tap,并持续监听,将匹配到的页面标题、URL 和时间戳实时写入指定文件,便于后续分析。
介绍
Firehose Web Monitor 解决的是实时网页监控与内容匹配的问题。当您需要第一时间获取特定网页的更新、特定关键词的出现或符合复杂条件的页面内容时,传统轮询方式效率低、延迟高。该工具通过 Lucene 查询规则对爬取的网页进行实时过滤,匹配结果通过 SSE(Server-Sent Events)流即时推送,让您无需轮询即可获得最新信息。
使用非常简单:您只需编写一条 Lucene 查询语句(例如 title:"新品发布" AND site:example.com),Firehose 就会持续监控全网爬虫数据,每当有页面满足条件时,立即通过 SSE 流将页面内容或摘要推送给您。您可以直接在终端或代码中消费这个流,实现实时数据处理。
适合数据分析师用于竞品动态监控、营销专员追踪品牌提及和行业热点、运维工程师监控网站变更或异常内容。对于需要建立实时情报管道、自动化内容采集或触发后续工作流的团队,这款工具能大幅降低开发成本。
使用建议:注意规则粒度的平衡——过于宽泛的查询会导致大量匹配,占用带宽和计算资源;建议结合 site、date 等字段限定范围。同时,SSE 流是单向推送,不保证消息持久化,请自行设计消费端的数据存储逻辑。
核心特点
与同类工具(如 Google Alerts、ChangeDetection)相比,Firehose 支持复杂 Lucene 组合查询,并通过 SSE 流实时推送,可无缝集成到自动化工作流中,而非仅提供邮件通知或界面告警。
注意事项
不适用于需要持久化存储或历史数据回溯的场景,所有匹配数据仅通过实时流推送,消费端需自行处理消息丢失或重复。
常见问题
如何创建监控规则?
使用 Lucene 查询语法编写规则,例如 `content:"元宇宙" AND site:techcrunch.com`,通过 Firehose API 或管理界面创建 Tap。
支持哪些数据源?
Firehose 覆盖全网公开爬取页面,不限于特定网站,但需要规则中指定 `site` 或 `domain` 以缩小范围。
给 AI 助手的安装指引
如果你的 AI 编程助手(Claude Code、Cursor、TRAE 等)能看到这个页面,把下面这段发给它即可自动完成安装:
请访问 https://321skill.com/skills/firehose-web-monitor-x-5/raw/index.md 读取 Firehose Web Monitor 的原始 Skill 定义(Markdown 格式),按其中说明在我的环境里完成安装和配置。
AI 可直接读取的原始 Markdown 地址:/skills/firehose-web-monitor-x-5/raw/index.md(查看排版版本)