大数跨境

Google:停止使用 403 或 404 状态码来降低 Googlebot 的抓取频率

Google:停止使用 403 或 404 状态码来降低 Googlebot 的抓取频率 谷歌google快讯
2023-02-17
0
导读:Gary Illyes 在 Google Search Central 网站发布了一篇新博文,呼吁大家停止使用 403 和 404 服务器状态码来降低 Googlebot 的抓取率。他表示,他们注意到

谷歌官方警告:勿用403/404状态码降低Googlebot抓取率

Google Search Central近日发布博文,明确呼吁网站所有者及内容分发网络(CDN)停止使用403和404服务器状态码来限制Googlebot抓取。谷歌搜索倡导者Gary Illyes指出,近期尝试通过此类错误代码控制抓取频率的行为显著增加,但该方法不仅无效,还可能产生反效果。

错误代码无法有效控频

Gary Illyes强调,在过去几个月中,不少站点试图利用404及其他4xx客户端错误(429除外)来降低Googlebot抓取率。他明确表示:“请不要这样做。”事实上,返回403或404状态码并不能帮助快速减少抓取请求,反而可能导致搜索引擎误判页面状态,引发不必要的索引问题。

应遵循官方文档规范操作

针对如何科学管理Googlebot抓取频率,Illyes建议站长直接查阅谷歌官方提供的技术文档。该文档详细说明了合规且有效的抓取频率调整方法,而403/404状态码并不在推荐方案之列。正确使用官方工具与配置,才是保障网站SEO健康、避免抓取异常的根本途径。

【声明】内容源于网络
0
0
谷歌google快讯
谷歌官方更新资讯
内容 16664
粉丝 0
谷歌google快讯 谷歌官方更新资讯
总阅读521
粉丝0
内容16.7k