1:蜘蛛本身就是模擬用戶(hù)行為進(jìn)行爬行讀取,網(wǎng)站打開(kāi)速度慢,影響實(shí)際用戶(hù)體驗的同時(shí),肯定也同時(shí)會(huì )影響到模擬用戶(hù)體驗的蜘蛛。當一個(gè)網(wǎng)站打開(kāi)速度慢的時(shí)候,蜘蛛會(huì )對這個(gè)網(wǎng)站的評分降低,進(jìn)而影響到讀取、收錄等一系列行為。
2:蜘蛛抓取頁(yè)面數量=停留總時(shí)間/單個(gè)頁(yè)面停留時(shí)間先不管打開(kāi)速度慢蜘蛛會(huì )不會(huì )提前撤退的問(wèn)題,假若蜘蛛在網(wǎng)站的總停留時(shí)間固定,如果頁(yè)面打開(kāi)時(shí)間變慢,則總停留時(shí)間除以單個(gè)頁(yè)面的停留時(shí)間即蜘蛛抓取的頁(yè)面數量就會(huì )變少,抓取的量變少,相應的被收錄的量肯定也會(huì )變少。
3:網(wǎng)站打開(kāi)時(shí)間變慢之后,蜘蛛會(huì )對這個(gè)網(wǎng)站有抵觸意識,慢慢的就會(huì )來(lái)的次數變少甚至不再來(lái)爬取。當一個(gè)網(wǎng)站沒(méi)有蜘蛛爬取的時(shí)候,收錄量變少也是理所當然的事情了。