python - BeautifulSoup，findAll 之后 findAll？

Question

我对 Python 还很陌生，主要需要它来从网站获取信息。 在这里，我尝试从网站底部获取短标题，但无法完全获取它们。

from bfs4 import BeautifulSoup
import requests

url = "http://some-website"
r = requests.get(url)
soup = BeautifulSoup(r.content, "html.parser")

nachrichten = soup.findAll('ul', {'class':'list'})

现在我需要另一个 findAll 来从 var“nachrichten”获取所有链接/a，但我该怎么做？

Answer 1

如果您希望将所有链接放在一个列表中，请使用 css 选择器 和 select:

anchors = soup.select('ul.list a')

如果您想要单独的列表:

anchors = [ ul.find_all(a) for a in soup.find_all('ul', {'class':'list'})]

此外，如果您想要 href，您可以确保只找到具有 href 属性的 anchor 并提取:

hrefs = [a["href"] for a in soup.select('ul.list a[href]')]

使用 find_all 设置 href=True 即 ul.find_all(a, href=True) 。