Known Agents 是 Dark Visitors 的新名称,这款工具最初是一份公开的 AI 爬虫列表,以及通过 robots.txt 屏蔽它们的方法。它由 Bit Flip LLC 发布,如今自称是用于追踪、控制和面向 AI 代理及机器人进行优化的工具包,并称有 5,000 多个网站在使用。它的出发点很简单:网络流量中很大一部分已经不是人类,而网站主很少能看到哪些机器人在读取页面、用其内容训练模型或代表用户执行操作。
该产品面向担心 AI 训练抓取程序的出版商、产品和库存信息正被 AI 代理读取的电商和旅游网站、在线市场,以及文档被 AI 编程代理使用的科技公司。最近新增的内容包括 The Agentic Web Index(展示 5,000 多个网站机器人活动的公开数据)、AI 聊天引荐追踪,以及项目报告的 MCP 访问。Known Agents 衡量的是 AI 系统如何访问网站并为其带来流量;它不追踪品牌在 AI 回答中如何被描述。
Known Agents 的功能
Known Agents 可通过平台连接器、WordPress 插件或后端代码调用 API 接入网站。2026 年 10 月其网站上展示的功能包括:
- Agent Analytics:按页面和类别实时查看爬虫、抓取程序和 AI 代理的访问(AI 助手、AI 搜索爬虫、AI 数据抓取程序、编程代理、SEO 爬虫、搜索引擎爬虫等)。
- 收录 2,000 多个已知机器人和代理的 Agent Directory。
- AI Chat Referral Tracking:来自 ChatGPT、Claude、Gemini、Copilot、Perplexity、Meta AI、DeepSeek、Mistral 等 AI 聊天工具的真人访问。
- Automatic Robots.txt:完整覆盖的 robots.txt 文件,随新机器人的发现自动更新。
- 在 WordPress 上执行规则,屏蔽无视 robots.txt 的代理。
- Agent Identification API,用于验证发出请求的代理并在自己的代码中执行访问策略;另有用于自定义仪表盘的 Reporting API。
- 可将 AI 助手连接到项目报告的 MCP 访问、CSV 导出和团队成员管理。
- The Agentic Web Index、设置指南,以及免费工具 AI Bot Robots.txt Checker。
Known Agents 2026 年价格
Known Agents 采用自助服务,以美元按月计费,价格于 2026 年 10 月核实。Free 方案为 $0,包含 1 个项目、每月 10 万次事件和基础功能,官方称足以满足大多数网站。Startup 每月 $29,包含 3 个项目、100 万次事件和高级功能。Growth 每月 $299,包含 10 个项目、1,000 万次事件和高级功能。Enterprise 需报价,提供不限项目、按用量计费的事件、定制功能与 API,以及专属在线支持。
一次事件即一次 API 调用,例如一次被记录的访问。页面未显示年付价格,另有推荐计划。
Known Agents 的优缺点
优点
- 免费方案覆盖大多数单个网站。
- 已识别的机器人和 AI 代理目录庞大,分类清晰。
- 在一个视图中追踪来自众多 AI 聊天工具的访问。
- 自动 robots.txt,并可在 WordPress 上屏蔽无视规则的代理。
- 提供开发者 API、MCP 访问和公开数据索引。
缺点
- 不追踪品牌在 AI 回答中的提及或引用。
- 没有 SEO 功能:没有审计、关键词研究、排名追踪或内容。
- Startup 的 $29 与 Growth 的 $299 之间差距很大。
- 按事件计费,流量越大费用越高。
- 无法直接提升 AI 可见度:工具只负责衡量和控制访问。
Known Agents 的最佳替代方案
1. Sorank
Sorank 回答的是 Known Agents 之后的问题:当您知道 ChatGPT 和 Claude 会访问您的页面并带来流量后,怎样才能在它们的回答中被更频繁地提及?Sorank 每周向 AI 提出您客户会问的问题(Essential 方案在 ChatGPT、Claude 和 Gemini 上追踪 25 个提示词,Pro 方案追踪 50 个并新增 Perplexity 和 Grok,Business 方案追踪 150 个),并显示您的品牌是否被提及、哪些品牌被引用以及 AI 使用了哪些来源。它的仪表盘将 Search Console、Analytics 和 AI 流量汇总在一起。
随后,Sorank 作为以 Autopilot 方式运行的 SEO 和 GEO 软件付诸行动:找到关键词、构建主题集群,然后撰写文章、配图并发布到您的 CMS(支持 10 多种 CMS,包括 WordPress、Shopify 和 Webflow),同时处理内链、防止关键词内耗并核查事实。它通过其超过 5,000 名用户网站之间的直接单向链接网络带来反向链接,采用积分机制,托管链接可赚取积分,接收链接则消耗积分(Pro 每月 100 积分,Business 每月 300 积分),并每周阅读最多 5 个指定竞争对手的内容。您可以通过 MCP 连接器在 Claude 或 ChatGPT 中操作它,借助白标提供给客户,并使用免费 SEO 工具和 Chrome 扩展。方案价格为每月 $99、$249 和 $499(20、60 和 120 篇文章),按年付费则为每月 $49、$129 和 $249,提供 3 天免费试用和 90 天退款保证。
2. Profound
Profound 将 AI 可见度追踪与 AI 爬虫活动、声量份额和内容差距结合在一起。它适合希望在同一企业级平台中获得机器人数据和回答追踪的品牌。
3. Promptwatch
Promptwatch 追踪品牌在 AI 回答中的可见度,并提供爬虫日志和访客分析。对于想同时获得两种视角又不想支付企业级价格的团队,它是相近的选择。
4. Scrunch AI
Scrunch AI 帮助品牌观察 AI 代理说了什么、做了什么,并让网站呈现适应这些代理。它适合希望优化机器人所获取内容、而不只是屏蔽它们的公司。
5. Botify
Botify 分析大型网站的日志文件,包括 OpenAI 等 AI 爬虫,并向代理交付完整内容。它适合拥有技术 SEO 团队的大型电商和媒体网站。
6. Otterly AI
Otterly AI 监测品牌在 ChatGPT、Perplexity 和 Google AI Overviews 中的提及和引用。它弥补了 Known Agents 所缺少的回答追踪。
如何在 Known Agents 和 Sorank 之间选择
Known Agents 适合需要查看并控制机器人和 AI 代理在网站上行为的出版商、网店、旅游网站和开发者平台:哪些在抓取内容,哪些在读取商品页或文档,AI 聊天工具带来了多少访客,哪些代理需要屏蔽或验证。如果您的重点是访问控制和机器人分析,免费方案或 $29 的 Startup 方案能很快给您这一视图。
Sorank 适合希望提升在 Google 和 AI 回答中存在感、而不只是衡量 AI 访问的公司。如果您需要知道 ChatGPT、Claude 和 Gemini 在哪里提到您,然后发布文章并获得能改善这一点的单向链接,Sorank 每月 $99 起即可完成(按年付费为 $49),通常在 2 到 4 个月内看到效果。两款工具也可以同时使用。













