如何使我的网页不被百度收录?robots的生效时间

网络营销评论92

官方回答:百度严格遵循搜索引擎robots协议(详细内容,参见http://www.robotstxt.org/)。你可以设置一个robots文件以限制你的网站全部网页或者部分目录下的网页不被百度收录。具体写法,参见:如何撰写robots文件(笔者注:http://www.baidu.com/search/rdots.html)。

如果你的网站在被百度收录之后才设置robots文件禁止抓取,那么新的robots文件通常会在48小时内生效,生效以后的新网页,将不再建入索引。需要注意的是,robots.txt禁止收录以前百度已收录的内容,从搜索结果中去除可能需要数月的时间。

如何使我的网页不被百度收录?robots的生效时间-图片1

如果你的拒绝被收录需求非常急迫,可以在反馈中心反馈,我们会尽快处理。

笔者注:robots的生效时间很多地方说法都不统一,其实根本没有标准时间。根据官方的解答,更新robots后,会感觉到百度在比较快地遵守新规则,并按照新规则决定收与不收新网页,但是老网页不会被即时处理。所以如果以新网页来判断robots的生效时间,会感觉比较快:如果以老网页来判断robots的生效时间,可能会感觉百度并不遵守robots,或时间太长。网站的大小也有可能会影响这个“生效时间”。如果实在想快速删除百度索引,也可以通过技术手段针对百度Spider返回404,然后通过站长平台提交死链,但是普通用户还可以正常访问。

关注我们如何使我的网页不被百度收录?robots的生效时间-图片2

如何使我的网页不被百度收录?robots的生效时间-图片3

如何使我的网页不被百度收录?robots的生效时间-图片4

 
你还在实体店试完然后网上购买? 网络营销

你还在实体店试完然后网上购买?

这个时候,大部分人还是很理智的!不会是假的吧。要不我再找找,哇塞,又看到一家,卖388,488,588,一直到998的,每个价位都有。而且几乎每家都有专柜小票和三标,有的还送购物袋。这个时候你又开始思...
匿名

发表评论

匿名网友
:?: :razz: :sad: :evil: :!: :smile: :oops: :grin: :eek: :shock: :???: :cool: :lol: :mad: :twisted: :roll: :wink: :idea: :arrow: :neutral: :cry: :mrgreen: