Python网络爬虫技术与实战
上QQ阅读APP看书,第一时间看更新

2.5.5 反向链接数策略

反向链接数是指一个网页被其他网页链接指向的数量。反向链接数表示的是一个网页的内容受到其他人的推荐的程度。因此,很多时候搜索引擎的抓取系统会使用这个指标来评价网页的重要程度,从而决定不同网页的抓取先后顺序。例如,网页A上有一个链接指向网页B,则网页A上的链接是网页B的反向链接。

在真实的网络环境中,由于广告链接、作弊链接的存在,反向链接数不能完全等于重要程度。因此,搜索引擎往往会考虑一些可靠的反向链接数。