作為SEO從業者，不但要被搜刮引擎抓取，還要被收錄，最主要的是在收錄後有優越的排名，本文將簡略剖析下搜刮引擎收錄網頁的四個階段。每一個網站、每一個網頁的排名都是紛歧樣的，看看你的網站處於哪一個階段呢?

　　網頁收錄第一階段：巨細通吃

　　搜刮引擎的網頁抓取都是采用「巨細通吃」的計謀，也就是把網頁中能發明的鏈接一一參加到待抓取URL中，機器性的將新抓取的網頁中的URL提掏出來，這類方法固然比擬陳腐，但後果很好，這就是為何許多站長反響蜘蛛來拜訪瞭，但沒有收錄的緣故原由，這僅僅是第一階段。

　　網頁收錄第二階段：網頁評級

　　而第二階段則是對網頁的主要性舉行評級，PageRank是一種有名的鏈接剖析算法，能夠用來權衡網頁的主要性，很天然的，站長能夠用PageRank的思緒來對URL舉行排序，這就是列位熱中的「發外鏈」，據一名同夥懂得，在中國「發外鏈」這個市場每一年有上億元的范圍。

　　爬蟲的目標就是去下載網頁，但PageRank是個全局性算法，也就是當全部網頁有下載完成後，其盤算成果才是靠得住的。對付中小網站來說，辦事器假如質量欠好，假如在抓取進程中，隻看到部門內容，在抓取階段是沒法得到靠得住的PageRank得分。

　　網頁收錄第三階段：OCIP計謀

　　OCIP計謀更像是PageRank算法的改良。在算法開端之前，每一個網頁都賜與雷同的「現金」，每當下載某個頁面A後，A將本身的「現金」均勻分給頁面中包括的鏈接頁面，把本身的「現金」清空。這就是為何導出的鏈接越少，權重會越高的緣故原由之一。

　　而對付待抓取的網頁，會依據手頭具有的現金若幹排序，優先下載現金最富餘的網頁，OCIP大抵與PageRank思緒同等，差別在於：PageRank每主要迭代盤算，而OCIP則沒有須要，以是盤算速率遠遠快於PageRank，合適及時盤算應用。這大概就是為何許多網頁會湧現「秒收」的情形瞭。

　　網頁收錄第四階段：大站優先計謀

　　大站優先的思緒很間接，以網站為單元來權衡網頁的主要性，對付待抓取的URL行列中的網頁，依據所述網站歸類，假如哪一個網站期待下載的頁面最多，則優先下載這些鏈接。其實質思惟是「偏向於優先下載大型網站URL」。由於大型網站每每包括更多的頁面。鑒於大型網站每每是名站，其網頁質量一樣平常較高，以是這個思緒固然簡略，但有必定根據。

　　試驗註解這個算法固然簡略粗魯，但卻能收錄高質量網頁，很有用果。這也是為何很多網站的內容被轉載後，大站卻能排到你前面的最主要緣故原由之一。