Firehose Web Monitor

实时网页监控,规则匹配即推流

安装使用

复制下面这段提示词发给你的 AI(Claude / Cursor / TRAE / Codex / WorkBuddy 等),它会自动帮你完成安装:

帮我安装这个 AI Skill:Firehose Web Monitor。
它的用途是:实时网页监控,规则匹配即推流
完整的 Skill 内容见:https://321skill.com/skills/firehose-web-monitor-x-5/raw/index.md
请读取该页面内容,如果是 SKILL.md 格式直接安装,如果是 README 提炼核心 prompt 后安装。

提示词包含完整的 Skill 内容链接,AI 读取后即可完成安装。你也可以 查看完整内容 确认无误。

使用示例

'启动 Firehose Web Monitor,创建一个规则监控竞品官网(site:example.com)的新闻栏目,当标题包含“新功能”或“版本更新”时,将匹配结果通过 SSE 流输出到本地文件。' 它会自动调用 Firehose API 创建 Tap,并持续监听,将匹配到的页面标题、URL 和时间戳实时写入指定文件,便于后续分析。

介绍

Firehose Web Monitor 解决的是实时网页监控与内容匹配的问题。当您需要第一时间获取特定网页的更新、特定关键词的出现或符合复杂条件的页面内容时,传统轮询方式效率低、延迟高。该工具通过 Lucene 查询规则对爬取的网页进行实时过滤,匹配结果通过 SSE(Server-Sent Events)流即时推送,让您无需轮询即可获得最新信息。

使用非常简单:您只需编写一条 Lucene 查询语句(例如 title:"新品发布" AND site:example.com),Firehose 就会持续监控全网爬虫数据,每当有页面满足条件时,立即通过 SSE 流将页面内容或摘要推送给您。您可以直接在终端或代码中消费这个流,实现实时数据处理。

适合数据分析师用于竞品动态监控、营销专员追踪品牌提及和行业热点、运维工程师监控网站变更或异常内容。对于需要建立实时情报管道、自动化内容采集或触发后续工作流的团队,这款工具能大幅降低开发成本。

使用建议:注意规则粒度的平衡——过于宽泛的查询会导致大量匹配,占用带宽和计算资源;建议结合 sitedate 等字段限定范围。同时,SSE 流是单向推送,不保证消息持久化,请自行设计消费端的数据存储逻辑。

核心特点

与同类工具(如 Google Alerts、ChangeDetection)相比,Firehose 支持复杂 Lucene 组合查询,并通过 SSE 流实时推送,可无缝集成到自动化工作流中,而非仅提供邮件通知或界面告警。

注意事项

不适用于需要持久化存储或历史数据回溯的场景,所有匹配数据仅通过实时流推送,消费端需自行处理消息丢失或重复。

常见问题

如何创建监控规则?

使用 Lucene 查询语法编写规则,例如 `content:"元宇宙" AND site:techcrunch.com`,通过 Firehose API 或管理界面创建 Tap。

支持哪些数据源?

Firehose 覆盖全网公开爬取页面,不限于特定网站,但需要规则中指定 `site` 或 `domain` 以缩小范围。

给 AI 助手的安装指引

如果你的 AI 编程助手(Claude Code、Cursor、TRAE 等)能看到这个页面,把下面这段发给它即可自动完成安装:

请访问 https://321skill.com/skills/firehose-web-monitor-x-5/raw/index.md 读取 Firehose Web Monitor 的原始 Skill 定义(Markdown 格式),按其中说明在我的环境里完成安装和配置。