<ul id="g60s4"><pre id="g60s4"></pre></ul>
<strong id="g60s4"><nav id="g60s4"></nav></strong>
<ul id="g60s4"></ul>
  • <tr id="g60s4"></tr>
  • 
    
  • 或者

    如何識別百度真假蜘蛛

    作者:dengying 瀏覽:2153 發布時間:2015-05-06
    編輯 分享 評論 0

      

        百度蜘蛛對于站長來說可謂上賓,可是我們曾經遇到站長這樣提問:我們如何判斷瘋狂抓我們網站內容的蜘蛛是不是百度的?其實站長可以通過DNS反查IP的方式判斷某只spider是否來自百度搜索引擎。根據平臺不同驗證方法不同,如linux/windows/os三種平臺下的驗證方法分別如下:

      1、在linux平臺下,您可以使用host ip命令反解ip來判斷是否來自Baiduspider的抓取。Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即為冒充。

      2、在windows平臺或者IBM OS/2平臺下,您可以使用nslookup ip命令反解ip來 判斷是否來自Baiduspider的抓取。打開命令處理器 輸入nslookup xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 來判斷是否來自Baiduspider的抓取,Baiduspider的hostname以*.baidu.com 或*.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即為冒充。

      3、 在mac os平臺下,您可以使用dig 命令反解ip來 判斷是否來自Baiduspider的抓取。打開命令處理器 輸入dig xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 來判斷是否來自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或*.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即為冒充。

      Baiduspider IP是多少

      即便很多站長知道了如何判斷百度蜘蛛,仍然會不斷地問“百度蜘蛛IP是多少”。我們理解站長的意思,是想將百度蜘蛛所在IP加入白名單,只準白名單下IP對網站進行抓取,避免被采集等行為。

      但我們不建議站長這樣做。雖然百度蜘蛛的確有一個IP池,真實IP在這個IP池內切換,但是我們無法保證這個IP池整體不會發生變化。所以,我們建議站長勤看日志,發現惡意蜘蛛后放入黑名單,以保證百度的正常抓取。

      同時,我們再次強調,通過IP來分辨百度蜘蛛的屬性是非常可笑的事情,所謂的“沙盒蜘蛛”“降權蜘蛛”等等是從來都不存在的。


    詞條統計

  • 瀏覽次數:2153
  • 編輯次數:0次歷史版本
  • 最近更新:2015-05-06
  • 創建者:dengying
  • 相關詞條

    相關問答

    相關百科

    相關資訊

    思思91精品国产综合在线| 国产a视频精品免费观看| 影院无码人妻精品一区二区| 在线观看91精品国产不卡免费| av国内精品久久久久影院| 精品少妇人妻av无码久久| 久久精品亚洲日本佐佐木明希| 国产亚洲美女精品久久久| 国产精品hd免费观看| 七次郎在线视频观看精品| 日韩毛片免费无码无毒视频观看| 国产亚洲精品美女久久久久| 国产精品李雅在线观看| 久久亚洲精品高潮综合色a片| 91精品视频免费| 国产精品久久久久鬼色| 亚洲国产成人精品激情| 91精品国产综合久久四虎久久无码一级 | 国产精品高清全国免费观看| 国产精品麻豆欧美日韩WW| 久久久久久国产精品免费免费| 亚洲精品无码久久久久A片苍井空| 99精品众筹模特私拍在线| 老司机在线精品视频| 无码国产精品一区二区免费虚拟VR| 国产精品福利在线观看| 国产精品视频你懂的| 亚洲精品无码专区在线播放| 精品国产日韩久久亚洲| 色妞www精品视频一级下载| 亚洲精品免费网站| 伊人久99久女女视频精品免| 亚洲AV成人精品一区二区三区| 精品无码国产一区二区三区51安| 国产精品99久久不卡| 自拍偷自拍亚洲精品播放| 精品一区二区久久久久久久网精| 国产精品高清m3u8在线播放| 国产亚洲美女精品久久久久| 日韩国产中文字幕| 国产成人综合日韩精品婷婷九月|