surfup

禁止索引指令(noindex)

要求遵守指令的搜索引擎不要将页面纳入搜索结果的指令;它不会限制访问。

要求遵守指令的搜索引擎不要将页面纳入搜索结果的指令;它不会限制访问。

示例与用法

在预发布环境中,对不应出现在搜索结果里的页面添加 noindex;检查 HTML 或响应头。如果爬虫需要读取该指令,还要确认它能够访问页面。