电子商务网站的过滤器与筛选功能允许购物者通过颜色、款式等属性快速缩小产品范围，即分层导航（Faceted Navigation）。该功能非常适合针对中等搜索量的关键词，并能显著提升自然搜索流量。
……它能够显著提升自然搜索流量。
例如，照明零售商可将灯具细分为“台灯 > 黄铜台灯”，顾客可据此选择具体产品。从关键词需求看，“lamps”和“table lamps”属头部词，搜索量大；产品名称为长尾词，搜索量极小；而筛选导航生成的页面（如“Brass Table Lamps”）则对应中等搜索量，是子类别与筛选条件的交汇点。
分层导航的价值与挑战
分层导航页面通常针对中长尾关键词，代表每月数百至数千次搜索量。电商网站拥有成千上万个此类页面，能以自动化方式规模化覆盖更多关键词。以Wayfair为例，其筛选导航页面在25.7万个关键词上每月驱动约100万次自然访问。
然而，许多电商平台的导航链接对搜索引擎爬虫不可见，导致页面无法索引、排名及获取流量。因此，核心在于提供指向唯一URL且内容独特的可爬取链接。
确保链接可爬取
若页面无法被抓取，页内优化便无效。链接必须使用带href属性的锚点标签呈现。只要包含锚点标签、href及URL，爬虫即可识别；但div或span标签编码的链接会被忽略。
此外，URL必须唯一且不含哈希符号（hashtag），否则难以获得稳定排名。同时，需确保页面未被canonical标签、meta robots noindex、robots.txt disallow指令或nofollow属性限制抓取或索引。
可爬取示例：
- <a href="https://www.example.com/table-lamps/">Will be crawled.</a>
- <a onclick="changePage('table-lamps')" href="https://www.example.com/table-lamps/">Will be crawled.</a>
不可爬取示例：
- <span onclick="changePage('table-lamps')">Not crawled.</span>
- <div class="facetwp-checkbox" data-value="table-lamps">Not crawled.</div>
- <a onclick="changePage('table-lamps')">Not crawled.</a>
实施受控索引策略
为避免爬取预算浪费在低价值页面上，应限制机器人访问缺乏搜索价值的页面。
……限制机器人访问那些不太可能带来自然搜索价值的页面。
基于关键词研究，用户常按单一属性（如“蓝色台灯”）或跨筛选器组合（如“蓝色中世纪风格台灯”）搜索，这些页面值得索引。但同一筛选器下的多属性组合（如“黑色蓝色台灯”）极少被搜索，应限制索引。对于三个及以上筛选器的组合需谨慎处理，以免产生过多低质页面。
可通过canonical、noindex、disallow及nofollow等标签控制索引状态。同时，建议关闭配送速度、价格等无搜索价值筛选器的抓取权限。
打造独特页面内容
即使限制了抓取，仍需向搜索引擎证明高价值页面的相关性。每个筛选页面都必须具备独特的标题标签、元描述、H1标题及描述性内容块，避免与父页面重复。否则，爬虫可能将其误判为副本而导致无法索引。