百度站长平台检测robots.txt,提示301错误代码为何呢?

在上个月我网站做了https后发现到百度站长资源平台去检测robots文件,检测出的结果就是如下提示:
您的服务器配置有误
百度暂时无法连接您的服务器,请检查服务器的设置,确保您网站的服务器能被正常访问。错误代码301

robots检测出现301错误
以下是网站关闭后也会出现这种情况,错误码为404。
网站关闭后也会出现这种情况不料我查了很多资料,网上都是众说纷纭!说得也是一塌糊涂!不过也说出来一些检查robots的方法。网上不断有人问这个问题!没有人提出具体的原因,只是说检查自己服务器和robots文件设置,当然从问题出发理应是查找自己的问题,不过怎样检查始终是这样,而http协议的就可以检测,那么网站百度站长平台检测robots.txt,提示301错误代码是为何呢?
经过我一系列的测试,发现各大互联网公司的网站出现的也是同样问题,也是出现如下:
您的服务器配置有误
百度暂时无法连接您的服务器,请检查服务器的设置,确保您网站的服务器能被正常访问。错误代码301

Vue.js官网网站
boss直聘robots检测
前程无忧51jobrobots检测 百度robots检测始终是正常的
当然,阿里云等网站也检测过,依然是出现这个问题。这时会觉得不是自己网站服务器的问题,因为以大公司的技术标准,不可能弄个https都会搞错吧!直到这几天我又一次检测网站,发现都可以了,也就是说百度检测出来的也不一定是说你的配置有错误。最近百度搜索引擎资源平台升级改版,对各方面都有影响,所以我们在遇到这方面的问题,可以用其他检测方式来进行对比是否是自己的错误。
对此,有些不可全信,所以不要再纠结自己的网站是否有异常,只要真的存在异常,而又体现了异常,我们才能做进一步判断,是自己的问题。robots.txt设置也是一定要规范的,该做重定向也得做重定向,对于在搜索引擎中检测site:禁止了robots文件,如下图,只需查看自己是否禁止即可。
好博客-专注SEO优化技术

点赞

发表评论

电子邮件地址不会被公开。必填项已用 * 标注!昵称可为公司名称哦!SEO优化、网站诊断分析方案请联系微信/QQ:2690502116。