如何从 Googlebot-Mobile 的新智能中获益

Google的移动爬虫

Googlebot-Mobile 传统上专注于为功能手机及其有限浏览器设计的内容。然而，Google 最近宣布推出新版本 Googlebot-Mobile，该版本使用 iPhone 用户代理进行爬取，使其能够发现专为更强大的智能手机设计的内容。

作为搜索与SEO专业人士，我对 Google 处理智能手机搜索结果的方式感到失望。当用户在智能手机键盘上输入查询时，搜索引擎应优先展示智能手机内容而非桌面端内容以示奖励。相反，Google 将检测智能手机并提供适当格式内容的任务留给了各个独立网站，导致体验参差不齐。

沃尔玛的智能手机困境

以在 HTC Thunderbolt 智能手机上搜索“Walmart”为例：点击首个结果访问 www.walmart.com 时，沃尔玛会识别用户代理并重定向至 mobile.walmart.com（见左侧图片），此时可正常浏览为智能手机优化的电子产品页面（见中间图片）。但若直接点击谷歌关于沃尔玛电子产品的搜索结果，沃尔玛则会向智能手机提供该页面的桌面版（见右侧图片）。由于沃尔玛仅在其主页检测智能手机浏览器，导致数百万其他页面无法提供良好的移动搜索体验。

理论上，面向智能手机的新版 Googlebot-Mobile 可以解决这一问题。假设它能抓取沃尔玛的智能手机站点，便能发现并推送适合智能手机的电子产品页面，而非桌面版。然而，鉴于沃尔玛智能手机站点文本内容稀缺且严重依赖站内搜索而非分类结构，谷歌很可能认为其既不具备相关性也不具备可抓取性。

若沃尔玛采取明智措施，将所有桌面页面重定向至对应的智能手机页面，将大幅降低谷歌的工作难度。既然谷歌已了解哪一桌面页面对电子产品搜索最相关，若沃尔玛能将智能手机用户重定向至该页面的移动版，Googlebot-Mobile 也会被重定向，从而将 SEO 友好度较低的智能手机页面与高权重的桌面页面关联起来。随后，谷歌将跳过桌面页面，直接将智能手机搜索者引导至智能手机版本，通过绕过重定向为用户节省约一秒的加载时间。

打造对智能手机搜索友好的网站

从技术上讲，新版 Googlebot-Mobile 使用 iPhone 用户代理进行抓取。若您已拥有智能手机站点，利用新爬虫的最简单方法是在每个页面上检测智能手机浏览器，并向其提供该页面的智能手机版本。这不仅是最佳实践，也能确保来自直接链接、邮件营销、横幅广告等渠道的智能手机用户获得一致的良好体验。

关键在于以对待普通智能手机用户完全相同的方式对待 Googlebot-Mobile。例如，若为 Googlebot-Mobile 提供重度优化页面，而为其他用户提供不同页面，则违反了网站管理员指南，可能因“Cloaking（隐藏/伪装）”行为受到惩罚。Cloaking 是指针对搜索引擎和人类用户提供不同网页的做法。

若您的站点原本为提供功能手机内容而检测 Googlebot-Mobile，且希望告知谷歌同时存在功能手机和智能手机两个站点，则需要更新对不同版本 Googlebot-Mobile 用户代理（User-Agent）的识别：

功能手机版 Googlebot-Mobile：

• SAMSUNG-SGH-E250/1.0 Profile/MIDP-2.0 Configuration/CLDC-1.1 UP.Browser/6.2.3.3.c.1.101 (GUI) MMP/2.0 (compatible; Googlebot-Mobile/2.1; +http://www.google.com/bot.html)
• DoCoMo/2.0 N905i(c100;TB;W24H16) (compatible; Googlebot-Mobile/2.1; +http://www.google.com/bot.html)

智能手机版 Googlebot-Mobile：

• Mozilla/5.0 (iPhone; U; CPU iPhone OS 4_1 like Mac OS X; en-us) AppleWebKit/532.9 (KHTML, like Gecko) Version/4.0.5 Mobile/8B117 Safari/6531.22.7 (compatible; Googlebot-Mobile/2.1; +http://www.google.com/bot.html)

请注意，这两个版本虽均称为 Googlebot-Mobile，但与其关联的设备类型决定了应提供哪种类型的移动内容。