推薦：51.com的robots.txt有錯嗎？
什么是robots.txt文件?搜索引擎通過一種程序robot（又稱spider），自動訪問互聯(lián)網(wǎng)上的網(wǎng)頁并獲取網(wǎng)頁信息。您可以在您的網(wǎng)站中創(chuàng)建一個純文本文件robots.txt

上次發(fā)布了51被封文章后，引起了很多人的熱烈回應(yīng)，大家也借機指出了51.com存在的大量搜索引擎友好性方面的錯誤。隨著事件深入分析，各位細心的網(wǎng)友發(fā)現(xiàn)了更多問題，以致直接懷疑51.com是不是在有意炒作。以下是后續(xù)的一些觀點摘要：

郭彥景:

“聯(lián)系到五一左右百度大規(guī)模檢查并封殺作弊網(wǎng)站，開始讓業(yè)界以為51.com是百度懲罰的網(wǎng)站之一，通過某朋友提示到51.com的robots.txt文件，讓大家明白了百度網(wǎng)站只收錄一頁的原因，并不是搜索引擎人為所至，而是51.com自身原因。”

” 眾所周知，網(wǎng)站80%的流量來源于搜索，假如說51.com流量非凡之大，脫離搜索也可生存，那它將搜索屏蔽是可以理解的。但現(xiàn)在51.com偏偏在高速發(fā)展期，需要搜索的大量流量，51.com的robots.txt文件是針對所有搜索的，不僅僅是針對與自己產(chǎn)品相沖突的百度。同時51.com將包括kf.51.com域名下的所有頁面也屏蔽，顯然說不過去。

　　聯(lián)系到51.com各域名下的robots.txt更新時間，近日myspace.cn上線等，可以初步懷疑51.com想借機炒作，引導(dǎo)業(yè)界關(guān)注，沒想到被細心人員發(fā)現(xiàn)了robots.txt文件，導(dǎo)致炒作未能達到預(yù)期。“

全文見http://www.timev.com/vp/event/20070504/4026.html

Admin5某網(wǎng)友9527:

“個人估計是51.com被baidu收錄的信息很多都有問題,尤其那些舉報信息都是從baidu等搜索出來的,在最近公安嚴打網(wǎng)絡(luò)色情等問題上.前段時間不是有很多報道51.com有很多個人信息是性服務(wù)之類的么,51.com為了提高公司在有關(guān)部門的良好形象,估計是在被查之前來個自己清理不良信息吧.嚴打后肯定會恢復(fù). ”

全文見：http://www.admin5.com/html/3/2/20070505/42447.html

sheawey

“打開其他域名如ilive.51.com、qun.51.com、home.51.com、kf.51.com、my.51.com等的robots.txt文件，均是：

User-agent: *
Disallow: /

51.com此舉的目的何在？
1、搜索引擎蜘蛛頻繁訪問，影響速度，51根本不在乎seo，他不在意搜索引擎來的這點流量；
2、隱私問題，不想搜索引擎索引；
3、炒作，聯(lián)系到近段時間的兩篇文章（五一節(jié)向51.com學(xué)習(xí)、龐升東的51即將超越百度貼吧）以及mypace中文版的開通，等一段時間觀察吧，假如51.com的robots.txt文件修改了，那么是不打自招。”

全文見：http://sheawey.com/blog/baidu-kill-51com.html

51. com究竟是有意炒作還是遭人暗算或無意而為，恐怕只有問龐東升同志了。

分享：SEO優(yōu)化之“不要輕易使用泛解析”
半夜三更的忽然想起這個老想提出或者大家都知道的問題！先續(xù)在這里，之后給予全面補充！什么是泛解析：嚴格來講，是這樣的：假如對abc.com解釋到0.0.0.0