php - 在子目录中创建无限的附加页面

Question

我正试图查明 Moz 的爬虫卡住的问题。我们需要解决的一个简单问题是我们有相同页面的副本，即:

/capabilities/  
/capabilities/index.html

少数目录会出现该问题。但是我们也有一个问题，似乎是使可以访问的页面无限循环，只是为了这个子目录:

/customer_service.html/  
/customer_service.html/contact/index.html  
/customer_service.html/contact_us/contact_form.php  
/customer_service.html/contact/contact/contact/contact/index.html
/customer_service.html/contact/contact/contact_us/contact_form.php
/customer_service.html/contact_us/contact/contact/contact/index.html
/customer_service.html/contact_us/contact/contact/contact_us/contact_form.php
/customer_service.html/contact/contact_us/contact/contact_us/contact_us/contact/index.html

不断地继续......我认为它停止抓取只是因为它达到了 24,000 页。所有这些页面实际上都有效。实际上只需要两个页面:一个用于客户服务常见问题解答，一个用于联系公司。

我是营销人员，不是开发人员，所以我只知道这是一个问题。我想知道我们是否可以使用 htaccess 解决这个问题，或者是否还有其他问题。在我看来，所有这些其他页面都需要删除，而不仅仅是重定向。谢谢。

编辑:为说明和漫画目的添加了更多示例

Answer 1

有两件事要做。

一个是，就像你说的，不允许这些 URL 重定向到主页。显示您在 .htaccess 文件中的内容，我将看看您如何更改它。

另一方面，仅仅解决症状是不够的。你必须治愈疾病。这意味着您的网站上有一些不正确的链接。这些很可能是缺少初始斜杠的相对 URL(contact 而不是/contact)。