下面的列表有什么区别:
<meta name="robots" content="index, follow">
<meta name="robots" content="follow">
<meta name="robots" content="noindex, follow">
<meta name="robots" content="index, nofollow">
<meta name="robots" content="noindex, nofollow">
首先,你可能知道元机器人 标签.
元机器人标签是告诉蜘蛛或爬虫要抓取或索引哪个页面。
关注手段: 页面将被抓取。
没有关注意味着: 页面不会被抓取。
指数均值:您的页面显示在搜索结果中。
无索引意味着:您的页面未显示在搜索结果中。
<meta name="robots" content="index, follow">
该标签告诉网络爬虫所有页面都将被索引并爬行它们。
<meta name="robots" content="follow">
该标签用于告诉网络爬虫所有页面都将被爬行并建立索引。
<meta name="robots" content="noindex, follow">
此标记用于告诉爬虫程序跟踪但不在数据库中索引该页面。
<meta name="robots" content="index, nofollow">
告诉网络爬虫不要抓取页面,而是对其建立索引。
<meta name="robots" content="noindex, nofollow">
告诉网络爬虫既不索引也不爬行。
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)