要不要加,取决于新栏目承担的是“可被独立搜索发现的内容资产”,还是“只为站内分流、不指望被单独检索的入口”。如果新栏目只是把已有品类词做聚合,且聚合页内容与现有分类高度重复,给导航链接加nofollow通常只是减少爬虫在低价值页面间的跳转,并不能替代对栏目本身价值的判断;反过来,如果新栏目承载的是独立需求、有独立标题与正文,加nofollow反而会削弱它被当作入口发现的机会。
假设一个站点原本只卖咖啡豆,所有导航都指向“咖啡豆”这一个分类。现在业务要扩展到咖啡器具、咖啡课程、订阅配送三类。运营的第一反应是:在主导航里加三个新栏目链接,同时担心新栏目初期内容薄,给这些导航链接统一加nofollow,等栏目做起来再放开。
这个做法在只有一两个新栏目时可能看不出问题,因为爬虫仍能从首页其他位置找到这些页面。但当新栏目增加到五六个、每个下面再挂一批子分类时,情况会变:导航里的nofollow把主要入口切断了,爬虫只能靠站内搜索、面包屑或旧链接偶然进入,新栏目被发现的速度和稳定性都会下降。这时“样本成立”的经验就失效了。
如果“咖啡器具”能对应一批与“咖啡豆”不同的搜索意图,那么它是一个需要被独立理解、独立排名的页面。此时主导航链接是帮助爬虫和用户发现它的正常路径,加nofollow等于主动削弱这条路径。判断方法很直接:把栏目名当作查询词,看它是否指向与现有品类不同的内容,而不是同一批商品的换词表达。
如果新栏目只是把已有商品按另一种方式重新排列,标题、描述、正文都与其他分类高度相似,那么它更接近筛选页或聚合页。这类页面是否值得让爬虫反复抓取,需要单独评估。给导航链接加nofollow是一种控制抓取预算的手段,但它不解决页面本身重复的问题——重复内容仍然存在,只是入口变少。
加nofollow之前,先确认新栏目还能不能从其他正常链接到达。如果栏目页在文章正文、相关推荐、站点地图里都有可抓取的链接,导航加nofollow的影响相对有限;如果导航是唯一稳定入口,加nofollow就会让页面接近孤立。这个区别决定了同一个动作在不同站点上的结果完全不同。
假设上述站点决定先上线“咖啡器具”和“咖啡课程”两个栏目。可以这样做:第一周只给内容最薄、与现有分类重复度最高的子页面加nofollow,主导航里的一级栏目链接保持可抓取。然后观察两件事——新栏目页是否被正常发现,以及站内其他页面的抓取分布有没有明显变化。
如果一级栏目在合理时间内能被发现,说明导航链接发挥了作用,下一步可以继续放开第二个栏目;如果发现异常,再回头检查是内容问题还是链接结构问题,而不是立刻把所有导航链接都加上nofollow。这个动作的意义在于:它把“加不加nofollow”从一次性开关变成可回退的调节,让下一步决策有依据。
当品类从三个扩到十几个,导航本身会变长。此时常见做法是把不重要的栏目折叠进二级菜单,或把部分入口改为JS加载。问题在于,折叠和JS加载都可能让链接不再以标准可抓取形式出现,这时再加nofollow,效果会叠加。例外就出现在这里:小规模时加nofollow只是减少一条路径,大规模时它可能让整批新栏目失去稳定入口。
另一个例外是,栏目上线初期内容少,并不等于它不该被抓取。内容少是内容问题,入口被切断是结构问题,两者不能用同一个nofollow动作解决。把抓取量下降当成“处理正确”的证据也不可靠——抓取量归零还可能是因为链接被折叠、页面加载方式改变,或者站点整体抓取节奏调整,需要逐一排除。
回到最初的问题:扩张品类时是否需要新栏目,和要不要给导航链接加nofollow,是两个先后问题。先确认新栏目值得被独立发现,再决定入口是否放开;如果栏目本身不成立,加不加nofollow都只是掩盖问题,而不会让扩张真正生效。