
Google播客聚焦爬取机制与效率优化
Google近日发布新一期《Search Off The Record》播客,由John Mueller、Lizzi Sassman和Gary Illyes共同主持。本期节目重点探讨了Google的爬取逻辑、提升爬取效率的策略,并澄清了关于爬取频率与网站质量关系的常见误区。
关注IETF新型分块传输标准
除常规话题外,Gary Illyes透露Google正密切关注IETF(互联网工程任务组)提出的“新型分块传输”方案。作为robots.txt协议等网络标准的制定机构,IETF的这一新提案若落地实施,有望显著提升搜索引擎爬取过程的效率。Gary表示将持续跟进该技术进展。
2024年爬取效率优化目标
Gary进一步指出,提高爬取效率并减少无效爬取量是其2024年的核心工作方向之一。尽管业界关注的Bing IndexNow协议未被提及,但本期内容对于理解Google搜索基础设施的演进仍具重要参考价值。

