免费 · 无需注册 · 即时

您的网站是否在 悄悄拒绝 AI 助手吗?

网站上的一个小文件决定 Grok、Claude、ChatGPT 和 Gemini 是否可以读取。多数网站所有者从未看过它。大约五秒即可检查。

此检查关注什么

每个 AI 助手都会使用自动读取程序获取网页。读取内容前,它会先查找网站根目录中的 robots.txt,并遵循其中的规则。

这个文件往往已经多年未更新。它可能由网站开发者一次性写入,也可能由插件自动添加,此后无人查看。许多网站在无人有意决定的情况下,拒绝了客户每天使用的助手。

此工具读取该文件,并用简单语言说明哪些助手可以访问、哪些被拒绝。我们不会更改您的网站,只会读取。

我们检查的读取程序

Grok

xAI 为 Grok 公布了多个爬虫名称,我们会全部检查。

Claude

Anthropic 以不同名称区分实时问答读取和内容采集。

ChatGPT

OpenAI 对搜索结果、实时问答和训练使用不同的名称。

Gemini

Google 将助手读取与普通搜索分开,因此可以只允许其中一项。

我们还检查 Perplexity 和广泛使用的通用 AI 读取程序。供应商会更新爬虫名称;我们会维护此列表,且绝不会把不认识的名称报告为已阻止。