java - Selenium 没有提取与网站上相同的 HTML

Question

我正在开发一个项目，该项目连接到成绩查看器并从网站中提取 html。然而，当它这样做时，它似乎失去了一些东西。我正在连接到该页面并使用 Selenium WebDriver 打印 Web 源代码，但它生成的 html 与我在页面上看到的 html 略有不同。只是到处都缺少一些小块。这是我的代码:

    //get into frame
    driver.switchTo().frame(driver.findElement(By.id("sg-legacy-iframe")));//get inside iFrame grades are held in   
    WebElement full = driver.findElement(By.id("btnView"));
    full.submit();//click "show full view button"

    //Print out source
    PrintWriter pw = new PrintWriter(new FileWriter(new File("grades.txt")));
    pw.println(driver.getCurrentUrl());//confirms the driver is on the correct page
    pw.println((driver.getPageSource()));//prints out html
    pw.close();

我怀疑这可能是在页面和 iFrame 之间切换时出现的某种 cookie 问题，但我真的不知道。我还有一份应该获取的正确 HTML 代码的副本，它是实际输出，但它们很大，无法放入正文中。这些是指向 HTML 预期和输出的链接，其中任何 secret 信息均已更改。主要问题是找不到“AssignmentClass”div。

Desired HTML Output(HTML of the site)

HTML being output by my program

如果有人能解释为什么会发生这种情况或如何解决，我会永远爱你。

Answer 1

在我过去的一个项目中，我使用 getAttribute() 来获取 html 的源代码。那么沿着这些思路，你已经尝试过了吗？

driver.switchTo().frame(driver.findElement(By.id("sg-legacy-iframe")));
WebElement full = driver.findElement(By.id("btnView"));
full.submit();//click "show full view button"
WebElement body = driver.findElement(By.tagName("body"));

//Print out source
PrintWriter pw = new PrintWriter(new FileWriter(new File("grades.txt")));
pw.println(driver.getCurrentUrl());//confirms the driver is on the correct page
pw.println(body.getAttribute("innerHTML"));//prints out html
pw.close();