搜索与 AI
noindex 是什么？
不编入索引 · noindex directive
放在网页或服务器响应中的指令，要求搜索引擎不要把这一页放进搜索结果。
和 robots.txt 管的事不一样
robots.txt 管爬虫能不能抓取；noindex 管抓到之后能不能出现在搜索结果。Google 说明，想让页面不出现在搜索结果要用 noindex；如果同一页又被 robots.txt 拦住，Google 读不到页面，也就看不到这个指令。
也适用于 Google 的 AI 概览
Google 说明，AI 概览与 AI 模式属于搜索功能，网站可以用 noindex、nosnippet 等既有设置，限制内容出现在这些功能里。
参考资料
最近查核：