从淘宝第一个开始屏蔽百度以来，国内很多主流的 SNS 网站和大型的内容性质的网站都开始或即将开始屏蔽百度了，这些网站包括校内网、海内网等国内主要SNS网站，以及搜狐博客、51.com等网站。从SNS社区的说法，他们屏蔽搜索引擎是为了保护用户的隐私，但更多的是在保护自己的利益，比如说淘宝是在保护其极为客观的商品信息，而SNS是在保护对其最有价值的用户信息，特别从搜狐博客来看，更多的是希望提高其搜狗搜索的内容价值，总的来说，东西绝非单纯，纯粹是一种商业上的运作了，淘宝网敢第一个站出来跟百度斗，其他预谋已久的各大SNS网站跟着后头就跟着杀出来了。
这段时间百度又跟三鹿奶粉事件牵扯上了一些不清不楚的关系，搞的百度最近也疲于解释这些事，当然大家也不会真的相信这种解释了，因为百度在搜索结果人工干预上已经受到非常多的人的抱怨，我们也完全相信百度能干得出这样的事情，具体是因为这次风险大还是嫌钱少了没有去做，我们就不得而知了。
附一些主要网站的 robots.txt 文件，证明一下百度是如何被屏蔽的。
http://www.xiaonei.com/robots.txt
# Robots.txt file from http://www.xiaonei.com
# All robots will spider the domain
User-agent:BaiduSpider
Disallow:/
http://blog.sohu.com/robots.txt
User-agent: Googlebot
Disallow:
User-agent: baiduspider
Disallow: /
User-agent: Nutch
Disallow:
User-agent: *
Disallow: /
http://www.taobao.com/robots.txt
User-agent: Baiduspider
Disallow: /
User-agent: baiduspider
Disallow: /
From: Steady Blog 国内主流SNS开始屏蔽百度
posted on 2008-09-17 17:15
steady 阅读(3657)
评论(0) 编辑 收藏 所属分类:
News