创办于2010年,1000+家企业的共同之选!
网站robots生效时间分析
发布日期:2019.07.16在百度站长工具中能够看到网站的robots是否生效,有的时候是由于建站前期忘记写robots.txt文件,而有的时候是忘记将robots放出来。那么在黄山网站优化时,到底要多久才能将robots生效呢?
首先,先了解一下robots生效的过程:
1.蜘蛛发现robots文件修改并将信息传回;
2.分析修改前后的robots文件;
3.删除不允许被收录的索引数据。
这个过程中肯能还会存在其他的一些步骤,然而由于每个网站蜘蛛爬的频率和网站的权重不同(网站的重要性)而导致蜘蛛发现robots更改的时间延时或者被处理的优先性不同,最终导致的结果就是robots的生效时间不同。
通过以上分析我们可以得出robots的生效时间并不是一定的,如果你的robots更改后很久都没有生效的话,可以去这里投诉:tousu.baidu.com。
上一篇:
下一篇:
最新案例
RELATED CASES相关新闻
其它新闻
版权所有 :安徽凌众智能科技有限公司
咨询电话 :0551-65321807
移动电话 :13909696615 联系人:宋先生
地址:安徽省合肥市高新区天达路2号安徽大学科技园创新楼4楼
您可以通过左侧的联系方式和我们取得联系
还可以通过下面给我们留言,我们将在第一时间给您回复
LINKS