scrapy — 暂停爬虫、恢复爬虫

1、启动爬虫

scrapy crawl spider -s JOBDIR=record/spider-1

record/spider-1表示一个路径,作用是记录爬虫状态

2、暂停爬虫

  • 终端输入Ctrl+C,此时爬虫并不会立即停止,需要等待一会
  • 当终端出现可以敲击命令时,说明爬虫已暂停

3、恢复爬虫

scrapy crawl spider -s JOBDIR=record/spider-1
微信公众号
手机浏览(小程序)
0
分享到:
没有账号? 忘记密码?