输入域名,检查爬虫规则
无需登录。检查结果只反映 robots.txt 规则,不代表 CDN、防火墙或登录限制下的真实抓取结果。
正在读取 robots.txt 并分析规则...
提示:OAI-SearchBot用于搜索发现,GPTBot用于模型训练,两者用途不同,应根据业务选择规则。
关山阅SEO + GEO
读取网站公开的 robots.txt,分别判断搜索与 AI 爬虫是否被允许访问,并给出规则层面的处理建议。
无需登录。检查结果只反映 robots.txt 规则,不代表 CDN、防火墙或登录限制下的真实抓取结果。
提示:OAI-SearchBot用于搜索发现,GPTBot用于模型训练,两者用途不同,应根据业务选择规则。