IT技术学习网
IT技术学习网
您的位置: 主页 > 网站运营 > SEO >

robots.txt文件屏蔽后多久生效

2014-11-20 19:52 来源: IT技术学习网原创 阅读:

本文给大家讲述:robots.txt文件屏蔽后多久生效

来自百度lee的官方回复:

robots文件,百度是小时级更新的,但是后续将涉及到整个网站的更新,因此生效可能稍慢些。

从上面我们可以了解到:robots.txt文件被设置以后,百度蜘蛛会在一小时内了解到,并停止抓取。

而已经收录和抓取的页面,会慢慢在索引和收录中删除,这个过程可能会比较久,需要1周或数周时间。

更改robots.txt文件后,我们可以立刻在百度工具中提交robots文件,以加快百度更新robots.txt,

robots.txt文件屏蔽后多久生效
转载需注明出处:IT技术学习网 http://www.itjsxx.com/seo/robots_txt_effect.html

评论文章 robots.txt文件屏蔽后多久生效
评论列表(网友评论仅供网友表达个人看法,并不表明本站同意其观点或证实其描述)
IT技术学习网 - 关于我们 - 联系我们 - 版权声明 - 网站地图