我只想阻止 Google 抓取我网站上的特定页面,但我仍然希望其他搜索引擎(首先是百度)抓取它。
我什至不知道这是否可能。
最佳答案
你需要创建一个robots.txt文件来屏蔽google的userAgent
//在robots.txt中
User-agent: Googlebot
Disallow: /
User-agent: *
Allow: /
在此处阅读有关 robots.txt 的更多信息:https://support.google.com/webmasters/answer/6062596?hl=en
关于html - 怎样才能阻止谷歌抓取我的页面,但仍然让百度抓取呢?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/56750244/