Robots 的具体网页源码表现形式为：<meta name="robots" content=" ">。
Robots 的 content 部分文字可以填写的内容为：all、none、index、noindex、follow 和nofollow。对于 Robots 的 content 部分填充内容有如下说明解释：
l 设定为 all：文件将被检索，且页面上的链接可以被查询；
l 设定为 none：文件将不被检索，且页面上的链接不可以被查询；
l 设定为 index：文件将被检索；
l 设定为 follow：页面上的链接可以被查询；
l 设定为 noindex：文件将不被检索，但页面上的链接可以被查询；
l 设定为 nofollow：文件将不被检索，页面上的链接可以被查询。
一般来说，大部分网站并没有太多的内容禁止搜索引擎机器人索引，Robots 的通用写法都是：<meta name="robots" content="all">。如果想对 Robots 做一些个性化的设置，可以参照上面的相关说明来完善 Robots 的 content 部分内容。
微信扫码查看本文
发表评论