下面列出的区别是什么:
<meta name="robots" content="index, follow">
<meta name="robots" content="follow">
<meta name="robots" content="noindex, follow">
<meta name="robots" content="index, nofollow">
<meta name="robots" content="noindex, nofollow">
最佳答案
首先，你知道Meta Robots Tags吗？ Meta Robots Tags 是告诉蜘蛛或爬虫要抓取或索引哪些页面。
跟随意味着:页面将被抓取。
No Follow 表示:页面不会被抓取。
索引意味着:您的页面显示在搜索结果中。
没有索引意味着:您的页面没有显示在搜索结果中。
<meta name="robots" content="index, follow">
此标记告诉网络爬虫所有页面都将被编入索引并抓取它们。
<meta name="robots" content="follow">
这个标签用来告诉网络爬虫所有的页面都将被抓取和索引。
<meta name="robots" content="noindex, follow">
此标记用于告诉爬虫跟随但不索引数据库中的页面。
<meta name="robots" content="index, nofollow">
告诉网络爬虫页面不抓取而是索引它们。
<meta name="robots" content="noindex, nofollow">
告诉网络爬虫既不索引也不抓取。
关于html - "index, follow"和 "follow"有什么区别，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/51277433/