
谷歌重申:Googlebot不解析JSON文件
谷歌员工加里·伊利斯(Gary Illyes)近日明确表示,谷歌爬虫Googlebot仅负责下载JSON文件,并不执行解析操作。文件的实际解析工作由后续的索引器完成。
谷歌的爬虫不解析JSON,它们只是下载内容。解析任何内容的工作由例如搜索的索引过程来完成。
在谷歌搜索的抓取、爬取、索引及服务提供流程中,各环节分工明确。当被问及商家中心(Merchant Center)是否遵循同一原则时,加里表示:
我们通常使用共享基础设施,因此不必每次都重新发明轮子。我非常确定商家中心使用的是相同的解析器,但我从未与该团队合作过。
图片来源:Lizzi

