noindex 和 nofollow 是独立指令，可单独使用；noindex 使页面不被索引但需先被抓取，nofollow 在 meta 中效果弱于 rel="nofollow"，robots.txt 优先级高于 meta robots，x-robots-tag 优先级最高。
noindex 和 nofollow 是两个独立指令，不是捆绑生效的开关。写成 content="noindex,nofollow" 只是同时发出两个请求，但爬虫可以只遵守其中一个——比如 Google 会严格执行 noindex，却可能忽略 nofollow（尤其在 JS 渲染后解析链接时）。
什么时候该用 noindex 单独生效
页面有内容、需要被访问，但不该进搜索结果：比如登录后跳转页、A/B 测试分支、内部文档预览页。这类页面常被用户主动打开或通过站内导航到达，但无公开索引价值。
-
noindex必须依赖页面被成功抓取才能起作用——如果robots.txt拦了路径，或者服务器返回 404/500，这个标签压根不会被看到 - 已收录页面加
noindex后，Google 通常需 3–10 天逐步移除，期间仍可能出现在搜索结果中（带“已删除”提示） - 别指望它防数据采集：验证码页、隐私协议页写了
noindex,nofollow，照样能被人工复制、截图、分享，甚至被第三方工具当“内容源”抓取
nofollow 在 meta 标签里其实很弱
HTML 中的 <meta name="robots" content="nofollow"> 是对整页所有出站链接的统一声明，但实际效果远不如 <a href="..." rel="nofollow"></a> 精准。主流搜索引擎更信任后者，且仅对 rel="nofollow" 的单个链接做权重过滤。
- meta 级
nofollow不影响页面本身是否被索引，只建议“别顺着这页上的链接爬” - 如果页面本身是入口（比如搜索结果页、聚合页），只加
nofollow不加noindex，爬虫仍可能通过它发现并抓取大量子页面 - 某些旧爬虫会把
content="noindex, nofollow"（逗号后带空格）截断为只识别noindex；务必写成noindex,nofollow（无空格）
robots.txt 和 meta robots 冲突时，谁说了算
robots.txt 是门禁，meta name="robots" 是屋内贴的便条。门没开，便条就没人读。
-
robots.txt中Disallow: /admin/→ 爬虫根本不会请求/admin/login.html，哪怕它里面有noindex也无效 - 想彻底封死某个目录？优先改
robots.txt，而不是靠每个页面加noindex - 想保留链接可访问性但禁止收录（例如灰度发布页）？删掉
robots.txt的限制，只靠<meta name="robots" content="noindex"> - HTTP 响应头里的
X-Robots-Tag优先级高于 HTML 中的meta标签，动态页面建议优先用它
最易被忽略的一点：noindex 不等于“删除”，也不提供访问控制；它不阻止用户打开页面，不加密内容，不防止截图或复制，更不替代权限系统。把它当成 SEO 工具，不是安全机制。
前端入门到VUE实战笔记：立即使用
在学习笔记中，你将探索 前端 的入门与实战技巧！
