网页历史更新规律对搜索引擎抓取频次产生影响。鉴于搜索引擎资源有限,其在尽量节约资源的前提下,根据网站规模和更新频率来确定抓取次数,以实现网站更新策略的最优化。搜索引擎会假设,过去频繁更新的网页未来仍将保持较高的更新频率。
举例来说,若我们的网站每日晚9点定时更新内容,经过一段时间的有规律更新,搜索引擎的爬虫便会默认在此时间点抓取内容。这样一来,搜索引擎对网站的喜好程度得以提升,从而提高网页的抓取和收录几率。
用户体验策略对网站更新收录的影响
近期,在执行网站优化过程中,笔者注意到一个现象:首页内容更新后,网站排名出现波动,快照出现回档,但随后排名又得以恢复。经过对百度站长平台的关键词与流量进行深入分析,发现未经首页内容调整时,某一关键词具有较高点击量。
然而,在更新内容后,点击量有所下降,当快照回档时,排名反而上升。据此,笔者猜想,百度在抓取和收录内容时,会适度考虑用户体验,而网站的点击量则从侧面反映了用户体验。
换言之,搜索引擎往往会存储多个网页快照。若旧的网页快照更受用户青睐,那么新的网页快照未必能获得收录,因为搜索引擎始终以用户体验为核心考量。