javascript - 爬行受密码保护的弹出网站

标签 javascript perl web-crawler bots

我正在尝试抓取一个网站,

最佳答案

弹出窗口可能是标准 HTTP 身份验证。如果是这种情况,您可以像这样发送凭据:

http://user:pass@example.com

关于javascript - 爬行受密码保护的弹出网站,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/15234049/

相关文章:

javascript - Internet Explorer 11 中的 Facebook FB.init "Access is Denied"

javascript - 不一致 %sticky 命令

algorithm - 如何按特定顺序生成集合的叉积

mysql - 插入带有自动增量列的 MySQL 表

amazon-web-services - 如何将 AWS Crawler 配置导出为 JSON(或类似格式)并 checkin 源代码管理?

javascript - [非] contenteditable HTML5 元素上的键盘事件

javascript - HTML 表单到 XMLHttprequest

javascript - 保存动态加载的网页

perl - 如何将 YAML 映射表示为流映射 {},而不是多行 block 映射?

java - 解析/扩展数千个 URL 的工具/库