在前一段時間百度召開了“框計算”發(fā)布會，在百度CTO演講的時候曾說到一句話要點亮暗網(wǎng)，當然百度CTO所說的暗網(wǎng)是指在整個互聯(lián)網(wǎng)不被人們察覺關注的網(wǎng)絡，點亮暗網(wǎng)是搜索引擎奮斗的目標，作為SEO工作者還要關注的另一個暗網(wǎng)就是自己網(wǎng)站內(nèi)部不被搜索引擎收錄的網(wǎng)頁。這是站長對網(wǎng)站優(yōu)化中要關注的一點。
1、怎么判斷暗網(wǎng)
出現(xiàn)網(wǎng)站內(nèi)部的"暗網(wǎng)"意味著什么?最明顯的一點就是網(wǎng)站內(nèi)部結(jié)構(gòu)設計存在很大的缺陷，尤其是那些在搜索引擎中收錄比例很少的情況，那網(wǎng)站內(nèi)部結(jié)構(gòu)的就很嚴重了。當然搜索引擎不可能對網(wǎng)站中的任何一個網(wǎng)頁都會收錄但是一個網(wǎng)站內(nèi)部結(jié)構(gòu)優(yōu)化到位的其在搜索引擎中的收錄量一定是很高的。搜索引擎爬蟲光臨網(wǎng)站的頻率的表現(xiàn)是網(wǎng)站快照，一個網(wǎng)站內(nèi)部結(jié)構(gòu)優(yōu)化不到位的網(wǎng)站其快照也是會受到影響的，有的網(wǎng)中看他的快照比較新但是網(wǎng)站內(nèi)部的網(wǎng)頁卻不被收錄，更有甚者在網(wǎng)站快照中可以看到最近發(fā)布的網(wǎng)頁但是直接搜索網(wǎng)頁URL或用谷歌查詢語法查詢卻找不到網(wǎng)頁這是網(wǎng)站內(nèi)部暗網(wǎng)的一個標志，如果出現(xiàn)這種情況了那就要對網(wǎng)站內(nèi)部結(jié)構(gòu)進行考慮了。
2、造成暗網(wǎng)的原因
1>網(wǎng)站URL及內(nèi)部結(jié)構(gòu)設計
搜索引擎對網(wǎng)站的爬行收錄是按照鏈接進行的，所有從事SEO甚至剛從事SEO的人都會知道的一點就是網(wǎng)站URL優(yōu)化，網(wǎng)站的URL中包含有搜索引擎程序所不能識別的特殊符號以至于搜索引擎蜘在進入網(wǎng)站之后在爬行完所在網(wǎng)頁中的鏈接之后不能再根據(jù)鏈接區(qū)爬行網(wǎng)站中的其他網(wǎng)頁，還需要注意的一點就是網(wǎng)站內(nèi)如結(jié)構(gòu)設計不合理，在搜索引擎爬行到一個網(wǎng)頁之后找不到能爬行到其他網(wǎng)頁的鏈接那搜索引擎程序也會撤兵的，所以網(wǎng)站中的URL優(yōu)化之最重要的一點。
2>網(wǎng)站中原創(chuàng)內(nèi)容
當網(wǎng)站中內(nèi)容有加大量轉(zhuǎn)載的內(nèi)容也會影響搜索引擎對網(wǎng)站的收錄和爬行，當搜索引擎對網(wǎng)頁爬行之后該網(wǎng)頁中大量的搜索引擎數(shù)據(jù)庫中已經(jīng)有的東西拿搜索引擎為什么要再對你的網(wǎng)站再收錄一次呢?搜索引擎數(shù)據(jù)庫中也會對網(wǎng)站有一定的記錄，長時間的轉(zhuǎn)載內(nèi)容也會降低搜索引擎對網(wǎng)站的爬行頻率。
3>網(wǎng)站更新頻率
網(wǎng)站的更新頻率是決定搜索引擎對網(wǎng)站爬行頻率的重要一點，從搜索引擎的對網(wǎng)站的快照可以發(fā)現(xiàn)有的網(wǎng)站搜索引擎會幾個小時甚至更短的時間去光顧，因為里面有很多更新的網(wǎng)頁，搜索引擎能及時的將更新的網(wǎng)頁收錄到自己的數(shù)據(jù)庫中，及時的呈現(xiàn)到用戶面前也是提高搜索引擎的用戶體驗。
4>網(wǎng)站的外部鏈接
除了網(wǎng)站內(nèi)部鏈接優(yōu)化不到位會造成暗網(wǎng)之外，網(wǎng)站外鏈也很重要，在搜索引擎對整個互聯(lián)網(wǎng)按照鏈接進行爬行時，一個網(wǎng)站擁有大量的外鏈就會增大搜索引擎爬蟲光臨網(wǎng)站的次數(shù)。當然高質(zhì)量的網(wǎng)站外鏈是前提，一個網(wǎng)站擁有很多的外部鏈接但是鏈接所在的網(wǎng)站搜索引擎爬蟲光顧該網(wǎng)站的頻率更小那網(wǎng)站也不會因為此鏈接而增大搜索引擎爬蟲光臨的機會。
3、如何解決暗網(wǎng)
就網(wǎng)站內(nèi)部URL來說有效的方法就是URL靜態(tài)化，程序語言都支持這點，大型動態(tài)網(wǎng)站可以URL重寫或偽靜態(tài)，都會增加搜索引擎對網(wǎng)站的收錄，對于其他原因造成的暗網(wǎng)那就要站長及時頂起的為網(wǎng)站增加原創(chuàng)內(nèi)容。當然不提倡站長增加偽原創(chuàng)內(nèi)容，雖然偽原創(chuàng)會吸引搜索引擎爬蟲但是會降低網(wǎng)站的用戶體驗，搜索引擎程序來了走了用戶就不合算了。
點亮暗網(wǎng)不只是搜索引擎的目的也是所有從事SEO工作者要關注的一點。
1>搜索引擎對網(wǎng)站的爬行收錄是按照鏈接進行的，所有從事SEO甚至剛從事SEO的人都會知道的一點就是網(wǎng)站URL優(yōu)化，網(wǎng)站的URL中包含有搜索引擎程序所不能識別的特殊符號以至于搜索引擎蜘在進入網(wǎng)站之后在爬行完所在網(wǎng)頁中的鏈接之后不能再根據(jù)鏈接區(qū)爬行網(wǎng)站中的其他網(wǎng)頁，還需要注意的一點就是網(wǎng)站內(nèi)如結(jié)構(gòu)設計不合理，在搜索引擎爬行到一個網(wǎng)頁之后找不到能爬行到其他網(wǎng)頁的鏈接那搜索引擎程序也會撤兵的，所以網(wǎng)站優(yōu)化的不止是URL而是整站優(yōu)化。
2>網(wǎng)站中原創(chuàng)內(nèi)容
當網(wǎng)站中內(nèi)容有加大量轉(zhuǎn)載的內(nèi)容也會影響搜索引擎對網(wǎng)站的收錄和爬行，當搜索引擎對網(wǎng)頁爬行之后該網(wǎng)頁中大量的搜索引擎數(shù)據(jù)庫中已經(jīng)有的東西拿搜索引擎為什么要再對你的網(wǎng)站再收錄一次呢?搜索引擎數(shù)據(jù)庫中也會對網(wǎng)站有一定的記錄，長時間的轉(zhuǎn)載內(nèi)容也會降低搜索引擎對網(wǎng)站的爬行頻率。站長及時頂起的為網(wǎng)站增加原創(chuàng)內(nèi)容。當然不提倡站長增加偽原創(chuàng)內(nèi)容，雖然偽原創(chuàng)會吸引搜索引擎爬蟲但是會降低網(wǎng)站的用戶體驗，搜索引擎程序來了走了用戶就不合算了。
3>網(wǎng)站更新頻率
網(wǎng)站的更新頻率是決定搜索引擎對網(wǎng)站爬行頻率的重要一點，從搜索引擎的對網(wǎng)站的快照可以發(fā)現(xiàn)有的網(wǎng)站搜索引擎會幾個小時甚至更短的時間去光顧，因為里面有很多更新的網(wǎng)頁，搜索引擎能及時的將更新的網(wǎng)頁收錄到自己的數(shù)據(jù)庫中，及時的呈現(xiàn)到用戶面前也是提高搜索引擎的用戶體驗。
4>網(wǎng)站的外部鏈接
除了網(wǎng)站內(nèi)部鏈接優(yōu)化不到位會造成暗網(wǎng)之外，網(wǎng)站外鏈也很重要，在搜索引擎對整個互聯(lián)網(wǎng)按照鏈接進行爬行時，一個網(wǎng)站擁有大量的外鏈就會增大搜索引擎爬蟲光臨網(wǎng)站的次數(shù)。當然高質(zhì)量的網(wǎng)站外鏈是前提，一個網(wǎng)站擁有很多的外部鏈接但是鏈接所在的網(wǎng)站搜索引擎爬蟲光顧該網(wǎng)站的頻率更小那網(wǎng)站也不會因為此鏈接而增大搜索引擎爬蟲光臨的機會。
點亮暗網(wǎng)不只是搜索引擎的目的也是所有從事SEO工作者要關注的一點。
原創(chuàng)文章如轉(zhuǎn)載如轉(zhuǎn)載請注明：思靜石網(wǎng)絡營銷博客 [www.peryx.cn]
申請創(chuàng)業(yè)報道，分享創(chuàng)業(yè)好點子。點擊此處，共同探討創(chuàng)業(yè)新機遇！
