盧松松:搜索引擎收錄網(wǎng)頁的四個(gè)階段_SEO優(yōu)化教程
推薦:2013年百度綠蘿算法影響了什么?2013年百度綠蘿算法影響了什么?最有影響就是外鏈接方面,一定要做好,如果過于優(yōu)化的話會(huì)被認(rèn)為作弊,現(xiàn)在的百度搜索引擎很精明,判斷的也非常的準(zhǔn),在這方面要加強(qiáng)一點(diǎn)。
作為SEO從業(yè)者,不僅要被搜索引擎抓取,還要被收錄,最重要的是在收錄后有良好的排名,本文將簡單分析下搜索引擎收錄網(wǎng)頁的四個(gè)階段。每個(gè)網(wǎng)站、每個(gè)網(wǎng)頁的排名都是不一樣的,看看你的網(wǎng)站處于哪個(gè)階段呢?

網(wǎng)頁收錄第一階段:大小通吃
搜索引擎的網(wǎng)頁抓取都是采取「大小通吃」的策略,也就是把網(wǎng)頁中能發(fā)現(xiàn)的鏈接逐一加入到待抓取URL中,機(jī)械性的將新抓取的網(wǎng)頁中的URL提取出來,這種方式雖然比較古老,但效果很好,這就是為什么很多站長反應(yīng)蜘蛛來訪問了,但沒有收錄的原因,這僅僅是第一階段。
網(wǎng)頁收錄第二階段:網(wǎng)頁評(píng)級(jí)
而 第二階段則是對(duì)網(wǎng)頁的重要性進(jìn)行評(píng)級(jí),PageRank是一種著名的鏈接分析算法,可以用來衡量網(wǎng)頁的重要性,很自然的,站長可以用 PageRank的思路來對(duì)URL進(jìn)行排序,這就是各位熱衷的「發(fā)外鏈」,據(jù)一位朋友了解,在中國「發(fā)外鏈」這個(gè)市場(chǎng)每年有上億元的規(guī)模。
爬蟲的目的就是去下載網(wǎng)頁,但PageRank是個(gè)全局性算法,也就是當(dāng)所有網(wǎng)頁有下載完成后,其計(jì)算結(jié)果才是可靠的。對(duì)于中小網(wǎng)站來講,服務(wù)器如果質(zhì)量不好,如果在抓取過程中,只看到部分內(nèi)容,在抓取階段是無法獲得可靠的PageRank得分。
網(wǎng)頁收錄第三階段:OCIP策略
OCIP策略更像是PageRank算法的改進(jìn)。在算法開始之前,每個(gè)網(wǎng)頁都給予相同的「現(xiàn)金」,每當(dāng)下載某個(gè)頁面A后,A將自己的「現(xiàn)金」平均分給頁面中包含的鏈接頁面,把自己的「現(xiàn)金」清空。這就是為什么導(dǎo)出的鏈接越少,權(quán)重會(huì)越高的原因之一。
而對(duì)于待抓取的網(wǎng)頁,會(huì)根據(jù)手頭擁有的現(xiàn)金多少排序,優(yōu)先下載現(xiàn)金最充裕的網(wǎng)頁,OCIP大致與PageRank思路一致,區(qū)別在于:PageRank每次要迭代計(jì)算,而OCIP則不需要,所以計(jì)算速度遠(yuǎn)遠(yuǎn)快于PageRank,適合實(shí)時(shí)計(jì)算使用。這可能就是為什么很多網(wǎng)頁會(huì)出現(xiàn)「秒收」的情況了。
網(wǎng)頁收錄第四階段:大站優(yōu)先策略
大 站優(yōu)先的思路很直接,以網(wǎng)站為單位來衡量網(wǎng)頁的重要性,對(duì)于待抓取的URL隊(duì)列中的網(wǎng)頁,根據(jù)所述網(wǎng)站歸類,如果哪個(gè)網(wǎng)站等待下載的頁面最多,則 優(yōu)先下載這些鏈接。其本質(zhì)思想是「傾向于優(yōu)先下載大型網(wǎng)站URL」。因?yàn)榇笮途W(wǎng)站往往包含更多的頁面。鑒于大型網(wǎng)站往往是名站,其網(wǎng)頁質(zhì)量一般較高,所以 這個(gè)思路雖然簡單,但有一定依據(jù)。
實(shí)驗(yàn)表明這個(gè)算法雖然簡單粗暴,但卻能收錄高質(zhì)量網(wǎng)頁,很有效果。這也是為什么許多網(wǎng)站的內(nèi)容被轉(zhuǎn)載后,大站卻能排到你前面的最重要原因之一。
文章來源:盧松松博客 原文地址:http://lusongsong.com/reed/663.html
分享:百度打出組合拳 SEO將走向何方?2013年剛剛過了一個(gè)季度,百度就不斷打出組合拳,讓我們這些草根站長有點(diǎn)應(yīng)接不暇,感覺有點(diǎn)迷茫、有點(diǎn)不知所措�?磥戆俣冉衲瓴粌H雷聲大,雨也很大啦!那么我們就先回
- B2B網(wǎng)站SEO優(yōu)化實(shí)戰(zhàn)經(jīng)驗(yàn)分享
- 淺析如何提高SEO優(yōu)化團(tuán)隊(duì)效率
- 谷歌如何評(píng)價(jià)一篇博文是否是軟文
- 盧松松:Bing與Google搜索排名因素研究
- 盧松松:給谷歌的蜂鳥算法潑瓢冷水
- 提高移動(dòng)站在百度質(zhì)量度等級(jí)的詳細(xì)說明
- 谷歌推出網(wǎng)站人工干預(yù)通知
- 優(yōu)化技巧:如何設(shè)置自定義503錯(cuò)誤頁面?
- 解讀SEO元素周期表
- 網(wǎng)站SEO最高境界之從 “人性化” 出發(fā)
- 社會(huì)化媒體營銷是如何對(duì)企業(yè)產(chǎn)生相應(yīng)影響
- 小站長們?cè)撊绾蚊鎸?duì)新一輪的百度算法調(diào)整
- 相關(guān)鏈接:
- 教程說明:
SEO優(yōu)化教程-盧松松:搜索引擎收錄網(wǎng)頁的四個(gè)階段
。