Files
crawlab/gitbook/Usage/Task
Marvin Zhang 0b40fab625 updated docs
2019-06-16 22:04:16 +08:00
..
2019-06-16 22:04:16 +08:00
2019-06-16 22:04:16 +08:00
2019-06-16 22:04:16 +08:00
2019-06-16 22:04:16 +08:00

任务

任务其实就是指某一次抓取任务或采集任务。任务与爬虫关联其执行的也是爬虫指定的执行命令或采集规则。抓取或采集的结果与任务关联因此可以查看到每一次任务的结果集。Crawlab的任务是整个采集流程的核心抓取的过程都是跟任务关联起来的因此任务对于Crawlab来说非常重要。任务被app触发,worker通过任务队列接收任务,然后在其所在节点上执行任务。

本小节将介绍以下内容:

  1. 查看任务
  2. 操作任务
  3. 下载结果