php - 有没有一种方法或工具可以自动访问我网站的所有页面

标签 php caching web-crawler

我想自动访问/抓取我网站上的所有页面以生成缓存文件。有什么方法或工具可以做到这一点吗?

最佳答案

只需使用任何下载整个页面的机器人:

https://superuser.com/questions/14403/how-can-i-download-an-entire-website

例如wget:

wget -r --no-parent http://site.com/songs/

关于php - 有没有一种方法或工具可以自动访问我网站的所有页面,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/9944841/

相关文章:

php - fatal error 说明 "Call to a member function bind_param() on a non-object"

PHPUnit - 使用 $_POST 变量测试 MVC Controller

java - Java中具有过期控制的分布式缓存

caching - Redis作为分布式网络中的缓存

PHP - 获取另一个网站内容并解析该内容的最快方式

html - 如何解析一个html页面并使用html标签的类名或id取出文本?

php - 在 Laravel 中设置 CSRF 保护的更好方法是什么?

html - W3 Total Cache 搞砸了我在 Godaddy 上托管的移动网站

php - 年龄验证表格和爬虫

php - Laravel - 在子文件夹中返回 View