因為搜索引擎不能一次抓取網(wǎng)站中的所有頁(yè)面,網(wǎng)站中的頁(yè)面數量會(huì )不斷改變,內容也會(huì )不斷更新,所以搜索引擎也需要保護和更新抓取的頁(yè)面,以便及時(shí)獲取頁(yè)面中的較新信息,抓取更多的新頁(yè)面。
一、定期抓取
定期抓取也稱(chēng)為周期性抓取,即搜索引擎周期性地對網(wǎng)站中現已抓取的頁(yè)面進(jìn)行全面更新。更新的時(shí)分,把抓取到的新頁(yè)面替換原有的舊頁(yè)面,刪除不存在的頁(yè)面,并存儲新發(fā)現的頁(yè)面。周期性更新針對的是悉數已抓取的頁(yè)面,因此更新周期會(huì )比較長(cháng)。
二、增量抓取
增量抓取是通過(guò)對已抓取的頁(yè)面進(jìn)行守時(shí)監控,實(shí)現對頁(yè)面的更新及保護??墒?,對網(wǎng)站中的每個(gè)頁(yè)面都進(jìn)行守時(shí)監控是不現實(shí)的。根據重要頁(yè)面攜帶重要內容的思維以及80/20規律,搜索引擎只需對網(wǎng)站中部分重要頁(yè)面進(jìn)行守時(shí)的監控,即可獲取網(wǎng)站中相對重要的信息。
增量抓取只針對網(wǎng)站中某些重要的頁(yè)面,而非所有已經(jīng)抓取的頁(yè)面,這也是為什么搜索引擎對重要頁(yè)面的更新周期會(huì )更短的原因。例如,內容經(jīng)常更新的頁(yè)面,搜索引擎也會(huì )經(jīng)常對其進(jìn)行更新,從而可以及時(shí)發(fā)現新內容、新鏈接,并刪除不存在的信息。
以上就是巨推傳媒帶給大家的信息,巨推傳媒是一家綜合型互聯(lián)網(wǎng)營(yíng)銷(xiāo)生態(tài)服務(wù)商,具有全面的網(wǎng)站代運營(yíng)服務(wù),如果你想了解更多關(guān)于網(wǎng)站代運營(yíng)、網(wǎng)站代運營(yíng)公司的信息,可以微信溝通(微信2696584379),或電話(huà)聯(lián)絡(luò )(400-606-5558),我們提供給您最優(yōu)質(zhì)的服務(wù)。