百度搜索资源平台检测robots,提示服务器配置有误,错误码301

MAY的SEO博客
MAY的SEO博客
MAY的SEO博客
543
文章
758
评论
2019年10月16日08:07:03 2 39,938

在逛某问答平台的时候,有小伙伴提问在百度搜索资源平台将测并更新robots.txt,提示:“您的服务器配置有误,百度暂时无法连接您的服务器,请检查服务器的设置,确保您网站的服务器能被正常访问。错误码:301。”如下:

百度搜索资源平台检测并更新robots服务器无法访问

真的是网站服务器无法访问的原因吗?

百度搜索资源平台检测robots,提示服务器配置有误,错误码301

Step 1. 检查网站是否能正常访问?

清理掉浏览器Cookie后再访问网站,查看其是否正常。或者请不同地区的朋友帮忙查看网站是否访问正常。如果网站能正常访问,则说明服务器是正常工作的。

我检查了一下小伙伴提问的网站,发现其可以正常访问。

Step 2. 检查网站是否有robots.txt?

检查网站下是否有robots协议,在网站域名后面加上/robots.txt,如https://may90.com/robots.txt。

我也检查了小伙伴网站的robots.txt,也是正常存在的。

Step 3. 检查网站是否有确定首选域?

在浏览器中分别输入带www和不带www的域名,看是否会统一跳转到某一固定域名上。因为对搜索引擎来说,www和不带www是两个不同的网站。

我检查了一下小伙伴的网站,分别输入www和不带www的域名,发现没有做301重定向,也就是没有确定首选域。

Step 4. 在百度搜索资源平台检测并更新robots

在对应的首选域名下的百度搜索资源平台检测并更新robots.txt。

在上一步中,我有发现小伙伴的网站是没有做301重定向的,于是我试着在我的非首选域名下检测并更新robots,结果如下:

然后我在我的首选域名下检测并更新robots,结果如下:

百度搜索资源平台检测并更新robots

百度搜索资源平台检测并更新robots

以上可以大致看出百度搜索资源平台检测robots,提示服务器配置有误,错误码301的原因了,

1检查网站服务器是否能正常访问;若能正常访问,

2检查网站下的robots.txt文件是否存在;若存在,

3检查网站是否有确定首选域,

不管有没有确定首选域,只要是在非首选域名下的百度搜索资源平台账号下检测并更新robots就会提示服务器配置有误。

正确的方法是先确定网站首选域,然后在首选域对应的百度搜索资源平台账号下检测并更新robots。当然百度搜索资源平台经常出现异常,检测并更新robots时,提示“请求失败,我们已记录此问题并将尽快处理,请刷新页面或稍后再试。”这就另当别论了,是平台自己的问题了。

 

  • 我的微信
  • 扫一扫微信,添加好友
  • weinxin
  • 我的微信公众号
  • 关注公众号,了解最新动态
  • weinxin
MAY的SEO博客
  • 本文由 发表于 2019年10月16日08:07:03
  • 转载请务必保留本文链接:https://may90.com/seo/baidu/robotstxt.html
如何禁止网页被搜索引擎索引 谷歌SEO优化

如何禁止网页被搜索引擎索引

目前仍然有人仅使用robots.txt文件来阻止他们的网站在Google或Bing中建立索引。结果,他们的网站仍然出现在搜索引擎中。你知道为什么会出现这样的结果吗?因为robots.txt实际上不会执...
如何正确使用robots.txt文件? 谷歌SEO优化

如何正确使用robots.txt文件?

当您网站在进行SEO优化工作时,robots.txt文件是一个功能强大的工具,但应谨慎对待。它可以允许或拒绝搜索引擎访问不同的文件和文件夹,我们应该如何正确使用robots.txt文件? 如何正确使用...
Robots.txt文件被谷歌索引,怎么办 谷歌SEO优化

Robots.txt文件被谷歌索引,怎么办

John Mueller最近就如何阻止robots.txt和站点地图文件在搜索结果中建立索引提供了一些建议。 Robots.txt文件被谷歌索引,怎么办 Gary Illyes的一条推文提示了这一建议...
请放弃使用Robots.txt Noindex指令 谷歌SEO优化

请放弃使用Robots.txt Noindex指令

Google在2019年7月1日就已经正式宣布Google蜘蛛将不再遵守与索引相关的robots.txt指令。依赖Robots.txt Noindex指令的发布者必须在2019年9月1日之前将其删除,...
匿名

发表评论

匿名网友 填写信息

:?: :razz: :sad: :evil: :!: :smile: :oops: :grin: :eek: :shock: :???: :cool: :lol: :mad: :twisted: :roll: :wink: :idea: :arrow: :neutral: :cry: :mrgreen:

评论:2   其中:访客  1   博主  1
    • 魏义齐个人博客 魏义齐个人博客 3

      百度搜索资源平台在遭到攻击时,会切换所有网站向平台的主动请求,比如周级收录接口提交,链接诊断工具、robots检测均会出现异常,这是为了减轻他们服务器的压力,攻击停止,功能会慢慢恢复。

        • MAY的SEO博客 MAY的SEO博客

          @ 魏义齐个人博客 百度搜索资源平台的数据更新非常慢,这是常有的事 :arrow: 这是百度自己的问题,不得不说作为中文最大的搜索引擎某些方面竟然做得太差了