meta robots的nofollow几乎无效，仅是页面级弱建议；真正可靠的是rel="nofollow"，它精准控制单个链接权重传递且被主流爬虫稳定支持。

meta robots 的 nofollow 几乎不控制权重流向——它不传递权重，但也不阻止爬虫抓取或索引目标页；真正管用的是 rel="nofollow"。

为什么 meta name="robots" content="nofollow" 无法精准控权

这个指令是页面级的“建议”，告诉爬虫“本页所有出站链接都别跟踪”。但主流引擎（尤其是 Google）在 JS 渲染后解析 DOM 时，压根不读它；即使读了，也只当弱提示。权重分配靠的是每个链接自身的 rel 属性，不是 meta 标签。

• rel="nofollow" 是 per-link 级别，被所有主流爬虫稳定支持，且能配合 ugc、sponsored 等语义值增强意图表达
• meta 级 nofollow 对内链无效，对已存在外链的页面无追溯力，也无法区分广告链接和用户评论链接
• 如果页面本身被大量外链指向，即使写了 content="nofollow"，爬虫仍可能抓取该页，并顺着其中未标记 rel="nofollow" 的链接继续深入

rel="nofollow" 的正确写法与常见错例

必须写在 @#@#@#@#@#@#@#@#@#@0

✅ 带语义：@#@#@#@#@#@#@#@#@#@1（注意 noopener 是安全必需）

❌ 错误：<a href="..." rel="nofollow,sponsored"></a>（逗号会破坏解析）

❌ 错误：<a href="..." rel="nofollow ugc"></a>（中间多空格或换行可能导致部分旧解析器截断）

什么时候还可能用到 meta name="robots" content="nofollow"

适用场景极少，仅限于你完全无法控制单个链接属性、又必须发一个粗粒度信号的情况：

Seo Article Agent

生成符合SEO优化的长篇文章，包含结构化标题和关键词丰富的内容，提升搜索引擎排名和可读性。

下载

• 整页都是 UGC 模板渲染（如评论区），且后端无法动态注入 rel 属性
• 临时测试页，既不想被索引，也不希望它成为任何外链的跳板——此时应配 noindex,nofollow（注意：逗号后不能有空格，否则旧爬虫只认 noindex）
• 某些内部工具页，链接全指向非公开系统，你只是发个“别顺藤摸瓜”的提示，不指望真拦住

真正影响权重流向的三样东西

别在 meta 上反复调试 nofollow，优先检查这三项：

• robots.txt 是否意外放行了不该抓的路径（门开着，meta 才有机会被读）
• 每个外链是否都明确写了 rel="nofollow" 或对应语义值（sponsored / ugc）
• HTTP 响应头是否设置了 X-Robots-Tag: nofollow（优先级高于 meta，还能用于 PDF、JSON 等非 HTML 资源）

如果你发现爬虫还在顺着某页链接乱爬，第一反应不该是改 meta，而是打开浏览器开发者工具，检查那些链接的 rel 属性有没有漏加、拼错、或者被 JS 动态覆盖掉。

前端入门到VUE实战笔记：立即使用
在学习笔记中，你将探索 前端 的入门与实战技巧！