媒体今日通过www.taobao.com/robots.txt发现，淘宝网已经屏蔽了百度“蜘蛛”。据了解，“蜘蛛”是通过网页的链接地址来寻找网页，从网站某一个页面（通常是首页）开始，读取网页的内容，找到在网页中的其它链接地址，然后通过这些链接地址寻找下一个网页，这样一直循环下去，直到把这个网站所有的网页都抓取完为止。而如果一个网站屏蔽搜索引擎蜘蛛的话，就意味着该家搜索引擎无法获取这家网站的内容。
对于淘宝屏蔽百度蜘蛛，淘宝网公关总监卢维兴表示，淘宝上有一些用户的隐私数据是肯定不允许搜索引擎抓取的。对淘宝是否完全屏蔽了百度的索引，卢维兴表示对此还不清楚。
我觉得淘宝应该屏蔽百度,更多门户站都该屏蔽百度，反正品牌已经有了。降低百度搜索结果质量，让百度不敢随意K站，或者一旦K站永远都不解封的做法。
昨天在落伍看到一个倡议：每个站长在自己的网上挂上这句话 “建议大家使用google搜索，全世界最好的搜索引擎”
Tags:
发表评论:
◎欢迎参与讨论，请在这里发表您的看法、交流您的观点。