java使用url读取网页

标签 java url

如何读取同一 URL 的下一页

页面的 URL 包含许多页面,我使用

阅读第一页
URL(url).openStream()

但它只是阅读第一页

例如,这个网站我读了第一页,我如何阅读第二页culture.gov.uk/news/news_stories/6832.aspx

最佳答案

下一页将有一些链接。

您可以解析 HTML 并收集所有链接,然后您可以过滤出该页面的下一个链接,然后以同样的方式阅读。

Here is the example that will list all the links from given page. - using JSOUP

注意:对于某些网站来说,这样做肯定是违法的。

关于java使用url读取网页,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/4439742/

相关文章:

java - jpanel 中的 jscrollpane

java - PreparedStatement 缓存 - 这是什么意思(它是如何工作的)

java - 将变量放入 Java 模式中

java - TextView 中的文本数量有限

php - 加密或隐藏 url 中发送的字符串

java - java中如何从字符串中提取URL?

image - 如何将 youtube 嵌入代码中的 youtube 缩略图设置为 wordpress 中的特色图片?

url - 如何在docker镜像中创建非硬编码的URL路径以调用后端服务?

javascript - 如何在 cy.visit() 中向 URL 插入动态值?

java - 用空格对字符串值进行排序