淘宝网robots.txt文件拒绝百度收录,但百度照样收录淘宝网页!百度是否很无耻!
提交者 Admin
来源 落伍者
浏览
发布时间 08/09/17
http://www.taobao.com/robots.txt 文件内容:
以下为网友回复: 如果换gg的话,立马把淘宝的全删。 有规则可讲么?
呵呵 说明百度蜘蛛 开始..
这才是百度
这就是百度的错了
别人不要你收录 你还奈着干嘛呢? 百度蜘蛛百毒不侵
可笑的百度
无耻的百度
无知的百度
百度的蜘蛛是贱种
呵呵 不收别人照样收 NB
真不要脸啊
如果不收录点,百度有点损失
BAIDU就是NB人啊
服了baidu
百度说,我们是系统自动的,非人工,有个过程
http://www.qqhomes.cn/robots.txt
我屏蔽了 一个多星期了! 妈的 还在更新 去掉结果是有一段时间的
百度蜘蛛百毒不侵
百度从来就没遵守过
百度是流氓来的。
晕。百度规则说了。需要时间的......
百度白痴...
百度没有规则
他牛比
这很正常啊
无赖
流氓 搞百度侵权
百度就是无耻呀
|
查看所有评论