当前位置: 首页 » 帮助中心 » SEO优化 » 正文

网站被robots屏蔽为什么还会被百度收录?

发布日期:2015-09-02  来源:模板村

有两种情况:第一种是对已经收录了的网页使用robots屏蔽,老网页按照robots规则的删除时间会很长,可能会造成百度没有遵守robots规则的感觉;第二种是如果被屏蔽的网页获得了大量的外链,那么这个网页的内容不会被百度索引,但是这个网页的URL可能会被百度收录,多见于域名首页。比如淘宝网,淘宝商城的大量卖家商城二级域名。如果连URL都不想被百度收录,那么针对百度Spider返回404即可。

 
关键词: robots
 
 
网站首页 关于我们 联系我们 如何购买 索取发票 网站地图 企业建站 网站留言 | 粤ICP备13084501号-7
在线客服