我知道通过命令:
scrapy crawl somespider -s JOBDIR=crawls/somespider-1
我可以使用 CTRL+C 暂停/恢复抓取。
我想知道的是如何重置 scrapy 并从头开始。是否有我需要删除/清空的文件?
M.
最佳答案
是的,你应该删除你的JOBDIR
scrapy crawl somespider -s JOBDIR=crawls/somespider-1
<ctr+C>
rm -rf crawls/somespider-1
关于python - 重置暂停的抓取,Scrapy,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/36956410/