python-3.x - 对于 fast.com，Requests-html 包无法正确呈现

Question

我正在使用 python 3.7 开发一个网络抓取应用程序。我正在使用 requests-html 来解析数据。到目前为止，我已经尝试了以下代码，它尝试使用渲染功能(因为 fast.com 上的速度数据是通过 javascript 加载的)。

from requests_html import HTMLSession
quote_page = 'https://fast.com'
session = HTMLSession()
r = session.get(quote_page)
r.html.render()
extract_value = r.html.find('#speed-value', first=True)
print(extract_value.text)

speed-value是包含速度数据的div使用的id属性。

但它仍然将速度值打印为 0。

Answer 1

速度测试需要几秒钟，初始渲染后需要等待几秒钟，所以指定一个 sleep 参数来渲染函数，这意味着初始渲染后要休眠多长时间。

例如:修改r.html.render()为r.html.render(sleep=10)

在我的电脑上测试，我得到了一个速度数。