大数跨境

Google 有两种类型的抓取——发现与刷新

Google 有两种类型的抓取——发现与刷新 搜索引擎报
2022-01-10
0
导读:Google 有两种网页抓取方式:一种用于发现新内容,另一种用于刷新已发布的内容。

Google搜索倡导者John Mueller在1月7日的SEO办公时间问答中明确,Googlebot采用两种抓取机制:发现新内容与刷新现有内容。针对SEO从业者关于发布频率降低导致抓取减少的担忧,Mueller表示这属于正常现象,并非负面信号。

Googlebot的两种抓取类型

通过Search Console报告观察到的抓取频率波动是常态。Mueller指出,Googlebot的抓取行为主要分为两类:

“我们并非整体抓取网站,而是针对各个页面进行抓取。具体分为‘发现式抓取’(Discovery Crawling),即尝试识别网站上的新页面;以及‘刷新式抓取’(Refresh Crawling),即更新已知存在的页面。”

不仅站点整体抓取频率存在差异,单个页面的抓取策略也各不相同。例如,若主页更新频繁,其抓取活动会显著多于其他页面。

“通常情况下,我们会对首页进行高频刷新抓取,如每天一次或每隔几小时。若在主页发现新链接,则会触发发现式抓取。因此,实际抓取总是两者的混合体。但对于变化极少的个别页面,系统会自动降低抓取频次。”

抓取频率取决于更新模式而非质量

Googlebot能够智能识别网站的更新规律并动态调整抓取节奏。新闻类网站若每小时更新,系统便会相应提高抓取频率;而对于月度更新的站点,则无需高频访问。

“这纯粹是技术层面的适配,与网站质量、排名等指标无关。系统仅根据内容更新周期判断每日或每周抓取的合理性。”

正确理解抓取频率波动

站长无需因Googlebot访问频率的变化而恐慌。即便近期有抓取记录但搜索结果未更新,也可能仅是因为Googlebot在执行“发现新内容”任务,而非“刷新旧内容”。对于极少修改已发布内容的网站,Googlebot更倾向于以发现为导向进行抓取,这同样不代表内容质量存在问题。

【声明】内容源于网络
0
0
搜索引擎报
搜索引擎时报
内容 2933
粉丝 0
搜索引擎报 搜索引擎时报
总阅读3.4k
粉丝0
内容2.9k