最新消息:野狼SEO,郑州网站优化专业服务商,中国纯白帽SEO倡导者!^-^纯白帽SEO是百度所支持的网站优化手段,承接开封、南阳、洛阳、新乡、西安、上海各地SEO外包服务业务……SEO交流群221715056 博主QQ1615241386

百度站长平台中robots.txt工具的百度更新时间不是百度抓取时间

网站优化经验 野狼SEO 146浏览

有的人通过查看百度站长平台的robots.txt更新时间来看百度蜘蛛是不是来爬过。这是错误的。为什么呢?先看一下野狼SEO博客吧。
上图所示的百度更新时间是在一个月前,但是事实上百度每天都会过来抓取的。
 

看看这个图就说明百度每天是要过来抓取一下的。所以他更新robots.txt跟是不是来抓取一点关系都没有。最主要的还是看抓取压力。

您必须 登录 才能发表评论!

网友最新评论 (1)

  1. 全部亲测可用,如有配置不成功的,留言给我或者加QQ1615241386
    野狼7年前 (2014-09-27)