百度站长平台Robots检测更新的时候出现错误

作者:jcmp      发布时间:2021-01-02      浏览量:0
出现请求失败。这个是什么原因?

出现请求失败。这个是什么原因?

如图的原因是百度自身原因,可以去google robots检测工具进行测试。这是第一种情况。


第二种情况如下图所示

错误码301.这种情况就需要进行按照如下步骤进行检测。


Step 1. 检查网站是否能正常访问?

清理掉浏览器Cookie后再访问网站,查看其是否正常。或者请不同地区的朋友帮忙查看网站是否访问正常。如果网站能正常访问,则说明服务器是正常工作的。

我检查了一下小伙伴提问的网站,发现其可以正常访问。

Step 2. 检查网站是否有robots.txt?

检查网站下是否有 robots协议 ,在网站域名后面加上/robots.txt,如

https://www.johotop.com/robots.txt。 www.johotop.com

我也检查了小伙伴网站的robots.txt,也是正常存在的。

Step 3. 检查网站是否有确定首选域?

在浏览器中分别输入带www和不带www的域名,看是否会统一跳转到某一固定域名上。因为对搜索引擎来说,www和不带www是两个不同的网站。

我检查了一下小伙伴的网站,分别输入www和不带www的域名,发现没有做301重定向,也就是没有确定首选域。

Step 4. 在百度搜索资源平台检测并更新robots

在对应的首选域名下的百度搜索资源平台检测并更新robots.txt。

在上一步中,我有发现小伙伴的网站是没有做重定向!

巨宏网络-香港免备案虚拟主机,香港虚拟空间,香港ASP虚拟主机,香港PHP虚拟主机,免备案虚拟主机,香港免备案云虚拟主机,香港云服务器,香港虚拟主机支持试用 www.johotop.com

的,于是我试着在我的非首选域名下检测并更新robots,结果如下:

然后我在我的首选域名下检测并更新robots,结果如下

以上可以大致看出百度搜索资源平台检测robots,提示服务器配置有误,错误码301的原因了,

1检查网站服务器是否能正常访问;若能正常访问,

2检查网站下的robots.txt文件是否存在;若存在,

3检查网站是否有确定首选域,

不管有没有确定首选域,只要是在非首选域名下的百度搜索资源平台账号下检测并更新robots就会提示服务器配置有误。

正确的方法是先确定网站首选域,然后在首选域对应的百度搜索资源平台账号下检测并更新robots。当然百度搜索资源平台经常出现异常,检测并更新robots时,提示“请求失败,我们已记录此问题并将尽快处理,请刷新页面或稍后再试。”这就另当别论了,是平台自己的问题了。