python - Python美丽的汤网爬虫不返回标签内容

Question

我正在尝试从本地bookie站点抓取比赛及其各自的赔率，但是我尝试使用我的网络抓取工具的每个站点都不会返回任何内容，而只会打印“ Process exit with exit code 0”，但不返回任何内容。
有人可以帮我打开容器，取出里面的东西吗？

我已经尝试了上述所有网站近一个月，但没有成功。问题似乎出在确切的div，class或跨度元素布局上。


https://www.betlion.co.ug/
https://www.betpawa.ug/
https://www.premierbet.ug/


例如我尝试显示代码中的链接2

import requests
from bs4 import BeautifulSoup

url = "https://www.betpawa.ug/"

response = requests.get (url, timeout=5)
content = BeautifulSoup (response.content, "html.parser")

for match in content.findAll("div",attrs={"class":"events-container prematch", "id":"Bp-Event-591531"}):
    print (match.text.strip())

我希望程序返回匹配，赔率和容器的所有其他组件的列表。但是，该程序将运行，并且仅显示““以退出代码0完成的过程”

Answer 1

看来分两个阶段加载了基础站点


为页面加载一些HTML结构，
使用JavaScript填写内容


您可以通过右键单击页面，执行“查看页面源代码”，然后搜索“事件容器”（不存在）来向自己证明这一点。

因此，您将需要比request + bs4更强大的功能。我听说有人使用Selenium来做到这一点，但我对此并不熟悉。