從淘寶第一個開始屏蔽百度以來，國內很多主流的 SNS 網站和大型的內容性質的網站都開始或即將開始屏蔽百度了，這些網站包括校內網、海內網等國內主要SNS網站，以及搜狐博客、51.com等網站。從SNS社區的說法，他們屏蔽搜索引擎是為了保護用戶的隱私，但更多的是在保護自己的利益，比如說淘寶是在保護其極為客觀的商品信息，而SNS是在保護對其最有價值的用戶信息，特別從搜狐博客來看，更多的是希望提高其搜狗搜索的內容價值，總的來說，東西絕非單純，純粹是一種商業上的運作了，淘寶網敢第一個站出來跟百度斗，其他預謀已久的各大SNS網站跟著后頭就跟著殺出來了。
這段時間百度又跟三鹿奶粉事件牽扯上了一些不清不楚的關系，搞的百度最近也疲于解釋這些事，當然大家也不會真的相信這種解釋了，因為百度在搜索結果人工干預上已經受到非常多的人的抱怨，我們也完全相信百度能干得出這樣的事情，具體是因為這次風險大還是嫌錢少了沒有去做，我們就不得而知了。
附一些主要網站的 robots.txt 文件，證明一下百度是如何被屏蔽的。
http://www.xiaonei.com/robots.txt
# Robots.txt file from http://www.xiaonei.com
# All robots will spider the domain
User-agent:BaiduSpider
Disallow:/
http://blog.sohu.com/robots.txt
User-agent: Googlebot
Disallow:
User-agent: baiduspider
Disallow: /
User-agent: Nutch
Disallow:
User-agent: *
Disallow: /
http://www.taobao.com/robots.txt
User-agent: Baiduspider
Disallow: /
User-agent: baiduspider
Disallow: /
From: Steady Blog 國內主流SNS開始屏蔽百度
posted on 2008-09-17 17:15
steady 閱讀(3699)
評論(0) 編輯 收藏 所屬分類:
News