当搜索引擎将网站上没有搜索价值的页面编入索引时,就会发生索引膨胀。谷歌索引高质量的页面。如果低质量的页面被索引,可能会影响您网站的认知度。 此外,大量已索引的低质量页面会降低网站的速度并影响用户体验。它还可能浪费宝贵的 机会。 示例如下 您的网站有一个智能电视的类别页面。买家可能会到达此页面以应用以下过滤器 品牌:三星 显示屏尺寸 至 英寸 分辨率 功能 智能电视 屏幕类型 平面 端口 个 在这些过滤器的帮助下,您的网站会显示适合买家要求的电视列表。 但用户真的会在 上进行如此精确的搜索吗?不太可能。
当用户不希望 搜索如此精
确时低质量且不满足搜索需求指生负面影响。 抓取预算浪费 另一个多方面的导航 问题是浪费抓取预算。索引膨胀的网站可能会遇到这个问题。 投入了大量的资源来审查互联网上发布的每个网站。爬虫花在审查网站上的时间称为“爬行预算”。由于爬网 捷克共和国电话号码表 预算有限,您不希望它被浪费。您应该希望爬虫专注于网页的重要方面,包括类别和产品页面。 仅优先管理页面数量超过 万个页面或内容快速变化的独特页面超过 , 个的网站的抓取预算。 许多人会阅读此信息,并认为抓取预算管理不必担心,因为他们的网站只有几千个产品和类别。不过,请注意。
当应用分面导航时它可以为每
个可用的分面组合创建可爬行的链接。如果您忽略潜在的索引膨胀问题,则可能意味着您正在创建数百万个网址供 抓取。因此,爬行预算管理成为您 蓝线 需要优先考虑的事情。不要让客户创建的网址进入 列表,从而抢走您想要编入索引的页面的注意力。 稀释 取决于页面上的链接总数。这对分面导航提出了固有的挑战,因为它创建了无数的内部链接。导航功能管理不当可能会在所有多面页面之间分配 。这意味着 不会增强主要类别中最重要页面的权威性,而是会在许多低质量的分面页面之间进行分割。