推薦：51.com的robots.txt有錯嗎？
什么是robots.txt文件?搜索引擎通過一種程序robot（又稱spider），自動訪問互聯網上的網頁并獲取網頁信息。您可以在您的網站中創建一個純文本文件robots.txt

上次發布了51被封文章后，引起了很多人的熱烈回應，大家也借機指出了51.com存在的大量搜索引擎友好性方面的錯誤。隨著事件深入分析，各位細心的網友發現了更多問題，以致直接懷疑51.com是不是在有意炒作。以下是后續的一些觀點摘要：

郭彥景:

“聯系到五一左右百度大規模檢查并封殺作弊網站，開始讓業界以為51.com是百度懲罰的網站之一，通過某朋友提示到51.com的robots.txt文件，讓大家明白了百度網站只收錄一頁的原因，并不是搜索引擎人為所至，而是51.com自身原因。”

” 眾所周知，網站80%的流量來源于搜索，假如說51.com流量非凡之大，脫離搜索也可生存，那它將搜索屏蔽是可以理解的。但現在51.com偏偏在高速發展期，需要搜索的大量流量，51.com的robots.txt文件是針對所有搜索的，不僅僅是針對與自己產品相沖突的百度。同時51.com將包括kf.51.com域名下的所有頁面也屏蔽，顯然說不過去。

　　聯系到51.com各域名下的robots.txt更新時間，近日myspace.cn上線等，可以初步懷疑51.com想借機炒作，引導業界關注，沒想到被細心人員發現了robots.txt文件，導致炒作未能達到預期。“

全文見http://www.timev.com/vp/event/20070504/4026.html

Admin5某網友9527:

“個人估計是51.com被baidu收錄的信息很多都有問題,尤其那些舉報信息都是從baidu等搜索出來的,在最近公安嚴打網絡色情等問題上.前段時間不是有很多報道51.com有很多個人信息是性服務之類的么,51.com為了提高公司在有關部門的良好形象,估計是在被查之前來個自己清理不良信息吧.嚴打后肯定會恢復. ”

全文見：http://www.admin5.com/html/3/2/20070505/42447.html

sheawey

“打開其他域名如ilive.51.com、qun.51.com、home.51.com、kf.51.com、my.51.com等的robots.txt文件，均是：

User-agent: *
Disallow: /

51.com此舉的目的何在？
1、搜索引擎蜘蛛頻繁訪問，影響速度，51根本不在乎seo，他不在意搜索引擎來的這點流量；
2、隱私問題，不想搜索引擎索引；
3、炒作，聯系到近段時間的兩篇文章（五一節向51.com學習、龐升東的51即將超越百度貼吧）以及mypace中文版的開通，等一段時間觀察吧，假如51.com的robots.txt文件修改了，那么是不打自招。”

全文見：http://sheawey.com/blog/baidu-kill-51com.html

51. com究竟是有意炒作還是遭人暗算或無意而為，恐怕只有問龐東升同志了。

分享：SEO優化之“不要輕易使用泛解析”
半夜三更的忽然想起這個老想提出或者大家都知道的問題！先續在這里，之后給予全面補充！什么是泛解析：嚴格來講，是這樣的：假如對abc.com解釋到0.0.0.0