如何增加我的抓取预算

abdur15

要提高在线商店的抓取预算，您可以通过两种方式进行：

减少爬取的URL数量：这是最简单的，因为这100%取决于我们。
让 Google bot 分配更多的抓取时间：在这种情况下，很难证明操作的相关性，以证明由于 X 个操作，Googlebot 没有分配更多的抓取时间。
根据我的经验，我们看到您可以执行的不同操作按其实施难易程度和对爬行预算的影响排序：

机器人.txt
Robots.txt 是您在该领域的最佳盟友，因为它可以让您减少要抓取的页面数量。我们将简单地告诉 Google 我们不希望它抓取哪些页面，例如电子商务管理页面，例如“我的帐户”、“购物车”、“Whislist”以及所有不包含搜索意图的页面。

加载速度
通过优化您的服务器和拥有更轻量级的网站，可以更轻松地跟踪您的电子商务。

301 重定向链
Google 在代码 200（来自服务器的正确响应代码）中查找页面所需的步骤越少越好，因为每次从 URL 跳转到 URL 都会对 Google 宝贵的服务器造成不必要的资源消耗，而这并不困扰我们。 。

站点地图.xml
通过正确使用 Sitemap.xml 文档，正确确定业务页面抓取和索引的优先级

索引标签控制
优化并确定应索引的页面的优 拉脱维亚 数据 先级。借此机会使用 robots.txt 阻止noindex 中的可抓取页面。

内容单薄
不要将抓取预算浪费在不包含任何搜索意图的页面上。

重复内容
显然，我们不要让 Google 两次抓取相同的 URL，因为它们之间有重复的内容。

内容发布频率
请记住，Google 的功能是发现互联网上的新内容，以便将其编入搜索结果索引。如果您经常发布针对用户搜索进行优化的有价值的内容，Google 将通过分配更多的抓取预算来奖励您。

权威
通过链接建设策略和其他媒体的公关行动来提高您在该行业的权威，成为在您的业务垂直领域享有盛誉的电子商务。