文章目录[隐藏]
Robots Exclusion Checker 是款实时URL检查机器人,可以用来检测txt、meta-robots、x-robots-tag&标记是否规范,分为红色、琥珀色和绿色三种状态。
机器人排检旨在直观地指示是否有任何机器人阻止搜索引擎对页面进行爬网或索引。
##扩展报告了5个元素:
1.robots文件robots.txt
2.Meta Robots标签
3.X-robots-tag 标签
4.Rel=Canonical
5.UGC、Sponsored和Nofollow属性值
插件下载
- 下载Robots Exclusion Checker1.1.8.1版本(更新时间:2022-10-17 22:03:46)