我想从搜索引擎中隐藏 public_html 中名为 ( beta ) 的文件夹及其所有子文件夹和文件，我是否必须将文件放在根文件夹 (/) 中并执行 robots.txt 的内容像下面这样
User-agent: *
Disallow: /public_html/beta
或
将robots.txt放在public_html中，做如下内容
User-agent: *
Disallow: /beta
最佳答案
robots.txt 必须在根目录中。
www.yoursite.com/robots.txt
这是你需要的:
用户代理:*
不允许:/folder/something
以某物作为您要禁止的文件夹的名称
另请注意，您只想阻止名为 something 的子文件夹。如果您还有一个您不想禁止的文件名，请执行以下操作:
用户代理:*
不允许:/folder/something/
关于seo - 隐藏特定文件夹及其子文件夹和文件？，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/14254057/