<ul id="g60s4"><pre id="g60s4"></pre></ul>
<strong id="g60s4"><nav id="g60s4"></nav></strong>
<ul id="g60s4"></ul>
  • <tr id="g60s4"></tr>
  • 
    
  • 或者

    淺談所謂的提權蜘蛛和降權蜘蛛

    作者:徐小樣 瀏覽:1235 發布時間:2017-04-19
    編輯 分享 評論 0

    之前在《SEO深度解析》中有看到過降權蜘蛛和提權蜘蛛,即如果抓取你網站的蜘蛛IP是降權蜘蛛的IP,那你的網站就是被降權了;反之,抓取你網站的蜘蛛IP為提權蜘蛛的IP,那你的網站權重較高。

    該書作者痞子瑞對此問題也表示不能肯定,然而百度LEE團隊官方曾經在百度站長平臺公開回答過該問題,并明確的否認了。當然,百度還不承認有百度權重,然而確實有,呵呵。

    官方的答復不可不信,也不可全信。今天又看《走進搜索引擎》,發現可能真的有所謂的提權蜘蛛和降權蜘蛛。

    搜索引擎工作過程中,在抓取環節,有一個重要性網頁優先抓取的策略,其實很好理解,搜索引擎需要抓取的新網頁和每天重訪的網頁規模都是巨大的,為保證更重要的網頁能夠優先抓取,使得在時效性和權威性上獲得滿意的效果,就需要對重要性網頁進行優先抓取。(這不就是百度權重高的網站嗎?)

    同時,在抓取環節,還有一個抓取提速策略,通過增加同時工作的爬蟲(即蜘蛛)數量。在多個蜘蛛抓取的情況下,需要按照域名來分解任務,使特定的爬蟲抓取特定的域名下的網頁。

    在域名分配的同時,要保證每個蜘蛛的工作量相等;如默認正常網站的規模為普通水準,抓取工作量一般;而重要性高的網站,通常其網站規模龐大,內容豐富,抓取工作量較大;但是網站被降權的網站通常使用大量垃圾內容作弊來獲取排名,其網站規模肯定也較大,抓取工作量也較大。

    假設:1*重要性網站=2*普通網站=1*作弊網站,那么蜘蛛抓取工作量體系結構類似于:

    spider1抓取重要性高的域名A

    spider2抓取普通網站B和C

    spider3抓取作弊網站的域名D

    則spider1為提權蜘蛛,spider3為降權蜘蛛。

    因為蜘蛛不光要抓取,還要返回抓取的網頁結果和新的URL,而URL的重要度會影響URL的抓取優先度,所以高權重網站上的URL是不能和普通網站、作弊網站上的URL放在一起的,因此為提高蜘蛛的工作效率,同一個蜘蛛肯定不會同時抓取不同重要度的網站。

    至于考核蜘蛛(即沙盒蜘蛛)、劣質文章蜘蛛等什么亂七八糟的蜘蛛,應該是不存在的。

    谷歌的沙盒期是會對新網站正常抓取,只是不會放出或者不會給予好的排名罷了,不關人家蜘蛛的事情。

    至于劣質文章蜘蛛,蜘蛛是按照域名來劃分工作,那可能就是降權了,要不就是想多了。

    對了,如果百度真的存在提權蜘蛛和降權蜘蛛的話,谷歌應該也有,畢竟搜索引擎工作原理是一樣的。


    詞條統計

  • 瀏覽次數:1235
  • 編輯次數:0次歷史版本
  • 最近更新:2017-04-19
  • 創建者:徐小樣
  • 相關詞條

    相關問答

    相關百科

    相關資訊

    国产激情精品一区二区三区| 亚洲日韩精品一区二区三区| 99热在线只有精品| 久久亚洲精品中文字幕三区| 久久久久国产成人精品亚洲午夜| 一区二区日韩国产精品| 国产亚洲日韩在线a不卡| 午夜亚洲AV日韩AV无码大全 | 国产精品视频九九九| 色精品一区二区三区| 伊人天堂av无码av日韩av| 日韩精品人妻系列无码专区免费| 欧日韩国产无码专区| 国产成人精品男人免费| 国产成人精品视频福利app| 国产精品不卡在线| 国产三级久久精品三级| 中文字幕日韩三级| 日韩欧美群交P内射捆绑| 日韩色日韩视频亚洲网站| 日产国产精品亚洲系列| 亚洲欧洲久久久精品| 国产高清在线精品一区小说| 国产手机在线精品| a级亚洲片精品久久久久久久| 国产精品亚韩精品无码a在线| 麻豆精品久久精品色综合| 久久精品国产亚洲AV麻豆不卡 | 亚洲精品中文字幕无乱码麻豆| 91精品国产人成网站| 国产成人亚洲精品| 中文字幕精品一区二区| 国产精品成人免费视频网站京东| 国产精品极品美女免费观看| 日韩免费码中文在线观看| 秋霞日韩一区二区三区在线观看| 下载天堂国产AV成人无码精品网站| 亚洲国产精品激情在线观看| 久久亚洲国产成人精品无码区 | 国产麻豆剧传媒精品国产AV| 国产精品久久亚洲一区二区|