我想禁止我的文件夹 /search 中的所有子目录，但允许索引搜索文件夹本身(我在 /search 上有内容)。
测试这不起作用:
User-Agent: *
Allow: /search/
Disallow: /search/*
最佳答案
您的代码看起来是正确的。尝试稍微调整一下 Allow:
User-Agent: *
Disallow: /search/*
Allow: /search/$
关于seo - robots.txt:如何禁止所有子目录但允许父文件夹，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/37437851/