机器人

Created: November-22, 2018

由几个主要搜索引擎支持的 robots 属性控制是否允许搜索引擎蜘蛛索引页面以及它们是否应该跟随页面的链接。

<meta name="robots" content="noindex">

此示例指示所有搜索引擎不在搜索结果中显示该页面。其他允许的值是：

值/指令	含义
`all`	默认。相当于 `index, follow`。见下面的注释。
`noindex`	根本不要索引页面。
`nofollow`	请勿点击此页面上的链接
`follow`	可以遵循页面上的链接。见下面的注释。
`none`	相当于 `noindex, nofollow`。
`noarchive`	不要在搜索结果中提供此页面的缓存版本。
`nocache`	某些机器人（如 Bing）使用的 `noarchive` 的同义词。
`nosnippet`	不要在搜索结果中显示此页面的摘要。
`noodp`	不要将 Open Directory 项目中此页面的元数据用于搜索结果中的标题或片段。
`notranslate`	不要在搜索结果中提供此页面的翻译。
`noimageindex`	不要在此页面上索引图像。
`unavailable_after [RFC-850 date/time]`	在指定的日期/时间之后，请勿在搜索结果中显示此页面。必须以 RFC 850 格式指定日期/时间。

注意： 明确定义 index 和/或 follow 虽然是有效值，但并不是必需的，因为几乎所有搜索引擎都会假设如果没有明确阻止这样做，他们就可以这样做。与 robots.txt 文件的运行方式类似，搜索引擎通常只会查找不允许执行的操作。只说明搜索引擎不允许做的事情也可以防止意外地说明不是所有搜索引擎都会以同样的方式对待的对立面（例如 index, ..., noindex）。