python - scrapy:禁用表单请求的过滤是否有意义?

标签 python scrapy

所以我一直想知道关于蜘蛛,我的一些请求是否可能被过滤,因为它们是到 url 端点但具有不同的正文参数(表单数据)。 dont_filter=True 对 FormRequest 对象有意义吗?

最佳答案

如果请求设置了 dont_filter 属性,则即使其域未在允许的域中列出,场外中间件也会允许该请求。

关于python - scrapy:禁用表单请求的过滤是否有意义?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/27600761/

相关文章:

python - 为什么 sklearn LatentDirichletAllocation 的 fit 和 partial_fit 返回不同的结果?

python - 模板的 Django/SQL 复式表

python - 如何要求生成的数据透视表包含所有列组合的可能性?

python - 使用 Scrapy Spiders 在不下载的情况下处理图像

python - 在 Visual Studio Code 中调试 Scrapy 项目

python-2.7 - Scrapy 从 unicode 转换为 utf-8

python - 如何将来自 UART 的传入字符添加到字符串中?

python - 如何开始在 Linux 主机上使用 python

python - 使用 Python 和 Scrapy 递归抓取 : Information Not Retrieved

scrapy - 如何在 scrappy 中手动执行 Request 对象?