search - 如何防止 robots.txt 从暂存环境传递到生产环境?

标签 search tomcat web-crawler robots.txt

我过去曾发生过,我们的一位 IT 专家会不小心将 robots.txt 从生产阶段移出。阻止谷歌和其他人在生产中索引我们客户的网站。有管理这种情况的好方法吗?

提前致谢。

最佳答案

请您的 IT 人员将 robots.txt 的文件权限更改为对所有用户“只读”,以便执行以下额外步骤:

  1. 成为管理员/root
  2. 更改权限以允许写入
  3. 用新文件覆盖 robots.txt

关于search - 如何防止 robots.txt 从暂存环境传递到生产环境?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/559242/

相关文章:

Ruby 搜索多维数组

tomcat版本冲突及apache 7.35与windows 10兼容问题

html - 如何覆盖 html 中现有的元标记?

java - 使用动态生成的内容抓取页面

Javascript listjs 多重过滤器

c# - 在 C# 中搜索字符串数组列表的有效方法

javascript - 隐藏没有指定字符串的 <div>

java - 私有(private) JVM 上的 Spring boot ware 部署,无法访问 Controller

java - ServletResponse.setBufferSize 在 Tomcat 7 中不起作用?

c# - .net 4.0 中并行化网络爬虫的最佳实践