linux - 如何使用 curl 命令行工具登录启用 cookie 的网站

Question

我正在尝试使用 curl 命令行工具登录网站 ( http://uva.onlinejudge.org ) 并收到此消息:

Session expired or cookies are not enabled in your browser. Please press "reload page" in your browser, and enable cookies in your browser. Please refresh/reload page before filling-in.

尽管我在 curl 中使用 cookie 'engine'。

我使用以下内容:

curl -X POST -o out.html \
--cookie uvacookie \
--cookie-jar uvacookie \
-F "username=username&passwd=password&cbsecuritym3=cbm_1960b41a_27dc4118_2767514d402a00c7480d9497dd8dbef4" \
'https://uva.onlinejudge.org/index.php?option=com_comprofiler&task=login'

我提取并简化了登录页面的 HTML 格式，并使用来自 firefox 的简化格式 成功登录。 这是表格:

<form action="https://uva.onlinejudge.org/index.php?option=com_comprofiler&amp;task=login" method="post" id="mod_loginform">

		<input type="text" name="username" id="mod_login_username" class="inputbox" size="10" />
		<input type="password" name="passwd" id="mod_login_password" class="inputbox" size="10" />
		<input type="hidden" name="cbsecuritym3" value="cbm_1960b41a_27dc4118_2767514d402a00c7480d9497dd8dbef4" />
		<input type="submit" name="Submit" class="button" value="Login" />
</form>

问题是什么？我如何才能登录并保存我想要访问的网站的 cookie，以便我可以浏览它？

Answer 1

确定的问题!

不得简化 HTML 表单。使用完整的 HTML 表单时，登录将成功。

表格如下:

<form action="https://uva.onlinejudge.org/index.php?option=com_comprofiler&amp;task=login" method="post" id="mod_loginform" style="margin:0px;">
<input type="text" name="username" id="mod_login_username" class="inputbox" size="10" />
<input type="password" name="passwd" id="mod_login_password" class="inputbox" size="10" /></span>
<input type="hidden" name="op2" value="login" />
<input type="hidden" name="lang" value="english" />
<input type="hidden" name="force_session" value="1" />
<input type="hidden" name="return" value="B:aHR0cHM6Ly91dmEub25saW5lanVkZ2Uub3JnLw==" />
<input type="hidden" name="message" value="0" />
<input type="hidden" name="loginfrom" value="loginform" />
<input type="hidden" name="cbsecuritym3" value="cbm_6d014498_5fb7509f_73f7153baaa7d545a091ca80411ca167" />
<input type="hidden" name="j9bec7c5b8b989a1feec6f95855aab890" value="1" />
<input type="checkbox" name="remember" id="mod_login_remember" value="yes" /> 
<input type="submit" name="Submit" class="button" value="Login" />
</form>

formfind.pl脚本可用于查找发布数据字段。由于登录页面使用静态发布数据，因此表单必须定期更新。

此 BASH 脚本自动更新 POST 数据并使用 curl 生成一个字符串以进行 POST。

#!/bin/bash
#this is rough and made quickly

cookieFile="uva.onlinejudge.org_cookie.txt"

curlFunc() { curl -f -L -s --compressed $@ ;}


formData="$(curlFunc "https://uva.onlinejudge.org/" | grep -B10 'value="Login"' | awk ' \
    BEGIN{
        printf "username=uname&passwd=pass&Submit=Login"
    } 

    /type="hidden"/ { \
        gsub(/\r/,""); \
        gsub("^.*name=\"",""); \
        gsub("\" value=\"","="); \
        gsub("\" \/>",""); \
        gsub(":","\"%\"3A"); \
        {printf "\&%s",$0} \
   }' \
)"

#POST to login form
curlFunc --cookie-jar "$cookieFile" --data "$formData" "https://uva.onlinejudge.org/index.php?option=com_comprofiler&task=login" >/dev/null

curlFunc --cookie "$cookieFile" "https://uva.onlinejudge.org" | grep -i "logout" >/dev/null && echo "Logged in successfully" || echo "Failed to login"

#------------------------------------------------------------------------

最后的 curl 命令:

curl --compressed --cookie-jar ".uva_cookie" --data \
"username=uname&passwd=pass&Submit=Login&op2=login&lang=english&force_session=1&return=B"%"3AaHR0cDovL3V2YS5vbmxpbmVqdWRnZS5vcmcv&message=0&loginfrom=loginmodule&cbsecuritym3=cbm_4f91ddd4_48433724_f4574ec18b7b5d249835064c788445f4&j9bec7c5b8b989a1feec6f95855aab890=1" \
"https://uva.onlinejudge.org/index.php?option=com_comprofiler&task=login"