淘宝网robots.txt文件拒绝百度收录,但百度照样收录淘宝网页!百度是否很无耻!

提交者 Admin 来源 落伍者 浏览 发布时间 08/09/17

http://www.taobao.com/robots.txt  文件内容:

User-agent: Baiduspider
Disallow: /

User-agent: baiduspider
Disallow: /

大家都知道搜索引擎都是严格遵守这一规则的,但是大家可以百度一下:site:www.taobao.com可以发现
百度并不遵守这一规则,仍然大量收录淘宝网网页
百度2008年8月,9月份收录的淘宝网页仍然很多!

 

以下为网友回复:

如果换gg的话,立马把淘宝的全删。

有规则可讲么?
 
呵呵 说明百度蜘蛛 开始..
 
这才是百度
 
这就是百度的错了

别人不要你收录  你还奈着干嘛呢?
 
百度蜘蛛百毒不侵
 
可笑的百度
 
无耻的百度
 
无知的百度
 
百度的蜘蛛是贱种
 
呵呵  不收别人照样收  NB
 
真不要脸啊
 
如果不收录点,百度有点损失
 
BAIDU就是NB人啊
 
服了baidu
 
百度说,我们是系统自动的,非人工,有个过程
 
http://www.qqhomes.cn/robots.txt  
我屏蔽了 一个多星期了! 妈的 还在更新
 
去掉结果是有一段时间的
 
百度蜘蛛百毒不侵
 
百度从来就没遵守过
 
百度是流氓来的。
 
晕。百度规则说了。需要时间的......
 
百度白痴...
 
百度没有规则
 
他牛比
 
这很正常啊
 
无赖
流氓
 
搞百度侵权
 
百度就是无耻呀
域名:www.ba5d4.c60 www.g66g3e.c60 www.qq.c60 www.s5na.c60.cn www.35ve.c60 www.163.c60 www.s6h4.c60 www.yah66.c60 www.s6s6.c60 www.0sn.c60 www.ta6ba6.c60 www.y6424.c60 www.246.c60 www.06*.c60 www.hex4n.c60 www.x4n3e5.c60 www.s6g64.c60 www.x5a6ne5.c60 www.t4d64.c60 www.2a5x5n001.c60 www.0ys*ace.c60 www.21cn.c60 www.51.c60 www.39.c60 www.cctv.c60 www.ynet.c60 www.t60.c60 www.6feng.c60 www.ch5na.c60 www.t5anya.cn www.w6rd*ress.c60 www.6r24t.c60 www.h55.c60 www.ra*5dshare.c60 www.w525*ed5a.6rg www.faceb662.c60 www.ebay.c60 www.y64da6.c60 www.y6da6.c60 www.zha6*5n.c60 www.za6ba6.c60 www.264be5.c60 www.1t5ng.c60 www.q5h66.c60 www.5116b.c60 www.d64ban.c60 www.b36gger.c60 www.24a5che.c60 www.ch5nahr.c60 www.csdn.c60 www.d46wan.c60 www.b36gb4s.c60 www.daq5.c60 www.q5d5an.c60 www.17173.c60 www.b36gcn.c60 www.a350a0a.c60 www.b36gch5na.c60 www.ch5naren.c60 www.east06ney.c60 www.yes2y.c60 www.5t168.c60 www.verycd.c60 www.y64t4be.c60 www.05cr6s6ft.c60 www.a35baba.c60 www.x5nh4anet.c60 www.s64f4n.c60 www.g64g64.c60 www.z6l.c60.cn
CopyRight © 2008 www.c60.name Inc All rights reserved.