蜘蛛程序陷阱(spider trap)
作者：長瘦不老i
瀏覽：425次
發(fā)布時間：2018-03-16
編輯
分享
評論
贊0
蜘蛛陷阱指的是由于網(wǎng)站內(nèi)容結(jié)構(gòu)的某種特征，使搜索引擎陷入無限循環(huán)，無法停止爬行，最典型的蜘蛛陷阱是某些頁面上的萬年歷，搜索引擎可以一直單擊下一個月陷入無限循環(huán)。
猜你喜歡