各大博客網站紛紛屏蔽搜索引擎抓取--中小站長如何應對?

2010-8-19 0:0:0 | 作者：sw996 | 0個評論 | 人瀏覽

近日，繼其它門戶（淘寶、sohu博客、校內網、海內網、51.com、中搜）紛紛宣布屏蔽百度搜索引擎舉措后，網上又曝出新浪博客已經屏蔽百度蜘蛛對其內容的抓取。由此引起網熱議，百度是否再次陷入“屏蔽門”。

由此新浪博客屏蔽百度搜索,將會給廣大中小站長帶來一些影響!一直以來,大型博客網站已經成為站長位做網站優化外鏈建設的重要途徑;由于博客中充訴眾多以廣告為目的內容,應該是這些“屏蔽門”事件的一個重要原因!

通過16號在新浪開的同聲傳譯博客Http://blog.sina.com.cn/tytongshengchuanyi  連續兩天更新,在百度/GOOGLE搜索中仍然找不到相關信息.我們通過查看新浪的http://blog.sina.com.cn/robots.txt文件,看到相關的禁止搜索引擎蜘蛛抓取.

#開放百度的搜索引擎的User-Agent代碼，*表示所有###########

User-agent： Baiduspider

#限制不能搜索的目錄，Disallow： 為空時開放所有目錄####

Disallow： /admin/
Disallow： /include/
Disallow： /html/
Disallow： /queue/
Disallow： /config/

#限制的搜索引擎的User-Agent代碼，*表示所有###########

User-agent： *

#臨時限制對所有目錄的禁止抓取

Disallow： /

通過以上文件可以看到新浪不只是限制了百度蜘蛛,包括所有搜索引擎蜘蛛全部限制了,

我們整理下已經明確屏蔽搜索蜘蛛抓取的博客名單:

新浪博客  blog.sina.com.cn
搜狐博客  blog.sohu.com
QZONE    qzone.qq.com  
百度空間  hi.baidu.com   (有收錄,但權重傳遞限制)
迅雷博客  blog.xunlei.com
Blog.com   www.blog.com
博客天下   www.blog.com.cn
中華網BLOG  blog.china.com

由此事件,提醒廣大站長朋友,在網站優化實施中,在外鏈建設時,我們提倡開展多樣性外鏈,有關外鏈的多樣性以及如何做好網站外部鏈接,請查看相關文章:

• 如何做好網站外鏈工作-提升網站優化排名效果

本文來自: 成都百度快照優化|成都百度關鍵詞排名優化|成都SEO【思為網絡】，轉載請保留出處！歡迎發表您的評論

相關標簽：

相關推薦