必须测量。上一篇文章已经部分描述了该测试,表后面的页面。 Googlebot 查看其他列表页面的频率比首页少几百倍。 研究的第一个结果是,Google 机器人很少会转到第 2、3 页并关注最流行的类别。例如,“待售狗”类别的第一页被查看了 550 次(37 天内),第二页 - 5 次,而第三页 - 仅一次。
对于前 50 个类别页面(各个类别的首页),Google 机器人访问 学生手机清单 次数比第 2 和第 3 页面高出 140 倍。 Googlebot 会转到后续列表页面。 考虑到所有类别(Googlebot 在实验期间查看的 5,024 个唯一类别和类别+区域页面),可以得出类似的结论。
Googlebot 大约访问过的所有首页。每天1000次,而第二次只有10次,第三次7次,以此类推。 Googlebot 每日访问按数字列出的所有页面 这意味着即使对以下列表页面建立了索引,它们也可能根本无法改善所列项目的索引。至少就高度动态的内容而言(例如每天添加数百个新的分类广告)。
将更多列表页面链接到首页会增加 Googlebot 的访问频率。 另一个结果是,第一种类型的页面(在分页链接内)列出的页面增加了 Google 机器人对它们的兴趣。 Google 机器人访问第 2、3、4、5、10、15 号页面的次数比其他页面多几倍: Googlebot 在列出的所有页面上的浏览总数 它还证实了我们之前实验的结果 - 测试抓取优先级的工作原理。