Google 或任何其他抓取工具是否可以抓取返回 301 状态代码的页面并将其编入索引?
我在 google 中看到一个页面,几个月来一直显示 301。但是索引中该页面的缓存日期是几天前的。
Google 可以忽略 301 并抓取页面内容吗?
最佳答案
通常,Google 会抓取重定向到的页面。您看到的网站的两种可能解释:
- 该网站只是显示了一条 301 消息,而不是正确返回 HTTP header 。
- 站点重定向到另一个 301,重定向到另一个 301,...
关于php - 301页面能被google抓取吗?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/19564090/