python - 使用 Mechanize 登录

Question

我正在尝试从网站中提取一些数据 - 不是很多 - 但足以保证一个小脚本......我正在尝试首先登录该网站 https://squashlevels.com使用 mechanize 和 cookielib，但我失败了...

我现在有

from bs4 import BeautifulSoup
import requests
import re
import urllib2 
import cookielib
import mechanize

cj = cookielib.CookieJar()
br = mechanize.Browser()

br.set_cookiejar(cj)
br.open("https://squashlevels.com/menu_login.php")

# How do I log in?

r = requests.get('https://squashlevels.com/players.php?all&club=1314')
soup = BeautifulSoup(r.content, "html.parser")

## Do stuff...

我应该使用什么代码来登录这个网站？

感谢您的宝贵时间。

Answer 1

这是一个仅使用 requests 的解决方案，我不确定 mechanize 是否会提供任何额外的值(value)。通过使用 requests.Session，您可以维护登录过程返回的 cookie，以便在请求 players.php 时包含在内。

该网站的一个小问题是您还需要发布密码的 MD5 哈希值:

email = 'user@host.com'
password = 'secret'

s = requests.Session()
s.post('https://squashlevels.com/menu_login.php', data={
    'action': 'login',
    'email': email,
    'password': password,
    'md5password': hashlib.md5(password.encode('utf-8')).hexdigest()
})

r = s.get('https://squashlevels.com/players.php?all&club=1314')
soup = BeautifulSoup(r.content, 'html.parser')

for row in soup.select('table.ranking tr'):
    print([col.text.strip() for col in row.select('td')])

输出:

['1', 'Nathan Miller', 'Bluecoat Sports Horsham', 'East England Masters 2018/19', '6', '15 Dec 2018', '4,706', '70%', '']
['2', 'Kit Pearman', 'Dorking', 'Surrey Winter League 2018/19', '2', '20 Nov 2018', '4,469', '64%', '']
['3', 'Simon Millard', 'Bluecoat Sports Horsham', 'Sussex Mens League 2018/2019', '1', '04 Dec 2018', '2,680', '57%', '']
...