网络营销,营销推广,全网营销,西安网站优化

投稿

非国内服务器如何解决搜索引擎抓取失败

东风营销 蜘蛛抓取
摘要  使用了非国内服务器或者CloudFlare后,去站长后台抓取针对,经常会出现抓取失败,或者提示socket读写错误,cf对蜘蛛我感觉是不友好的,许多时候使用了cf网站打开速度慢,蜘蛛抓取也...

  使用了非国内服务器或者CloudFlare后,去站长后台抓取针对,经常会出现抓取失败,或者提示socket读写错误,cf对蜘蛛我感觉是不友好的,许多时候使用了cf网站打开速度慢,蜘蛛抓取也有困难,会导致网站流量和SEO出现波动!

  其实导致搜索引擎抓取失败的原因还有服务器不稳定、人为操作失误、DNS异常、域名服务商把搜索引擎蜘封禁、移动联通电信网络运营商问题、ip被封禁等,以上这些都不是东风今天要说的话题,我们就只看看使用CloudFlare或者反向代理后的抓取失败问题!下面我们看看怎么操做

  1、准备好自己的阿里云或者腾讯云账号,下面我用自己的腾讯云来操作举例

  2、打开腾讯云DNS网址 https://www.dnspod.cn/选择DNS解析

非国内服务器如何解决搜索引擎抓取失败 第1张

  3、添加域名 不要www.baidu.com,输入顶级域名baidu.com即可

非国内服务器如何解决搜索引擎抓取失败 第2张

  4、根据提示替换DNS,去域名管理替换掉原来的DNS


非国内服务器如何解决搜索引擎抓取失败 第3张

  5、添加解析记录,一条的线路类型选择搜索引擎,也可以具体到百度还是搜狗等,记录值填写真实的服务器IP,如果网站做了反向代理,就在添加一条记录,记录值选择反向代理服务器的IP

非国内服务器如何解决搜索引擎抓取失败 第4张

  通过以上5个步骤,CloudFlare或者反向代理后的抓取失败问题就解决了,因为给搜索引擎提供了抓取的ip,就不会在出现抓取失败的问题了!是否还有更好的处理方法,如果您知道的话,希望能和东风分享,谢谢阅读!

标签:

    匿名评论
  • 评论
人参与,条评论
Copyright © 2019 NiPic.com All Rights Reserved 东风营销备案号:陕ICP备20006069号

东风营销提供西安网站优化与企业全网营销推广技术服务

专注网站推广技术解决企业网络营销推广难题

技术支持:东风SEO   网站地图
二维码
'); })();