DNSPOD对《关于百度排名的一点小结》的回复

dnspod上午刚写了篇博文《关于百度排名的一点小结》,其中说到dnspod对于百度爬虫数量、标示的不确定性,而带来的解析误差,导致客户站点无法百分百单独而准确地解析爬虫的问题。这不,下午dnspod的市场部MM–然然,就加我QQ了,给我大概解释了些内容,如下:

由于搜索引擎的ip库每天都在更新,我们每天都会去获取搜索引擎ip,并定期更新蜘蛛ip库的,但是我们跟不上他们更新的速度。

若您发现了新的蜘蛛ip,请加下我们的企业QQ:800020304,联系技术支持提供下ip,我们会定期更新到蜘蛛ip库里。

我们(与百度)有过合作,但是他们(蜘蛛ip库)更新不通知我们的…

看出来了吧,dnspod为了那条“搜索引擎”的解析规则,可谓煞费苦心,除了搞好每日必做的服务器维护和技术处理,还得费劲巴力去搞搜索引擎的爬虫ip,dnspod真是不易。 Continue reading

百度爬虫比我还懒…

本人对搜索引擎的“爬虫”没什么研究,更别说它们运行的“习性”和“方式”,但对各大搜索引擎爬虫的访问量,我还是有一个大致的统计。下图是Cloudflare统计的爬虫访问量:

看到了吧,就算是往前推三周的时间,都看不着百度爬虫的影子,难道是百度已经充分认识到:这一个小小的博客,内容更新幅度不会太大,即便是一个月不来,也没多大变化?!那我可真服了百度爬虫的智慧程度,在“运动量”和“获取信息量”两者间达到了一个百度自认为平衡的点,既不会浪费爬虫,也不会因为网站更新内容太多而失去时效性! Continue reading