Commit Graph

1536 Commits

Author SHA1 Message Date
marvzhang
7315deefee 加入复制爬虫 2020-02-24 09:12:03 +08:00
marvzhang
961bcd5c71 updated CHANGELOG 2020-02-23 09:30:07 +08:00
marvzhang
6000667b7d updated dockerpush.yml 2020-02-23 09:19:18 +08:00
marvzhang
2445e6240e 加入任务导航操作按钮 2020-02-23 08:45:38 +08:00
marvzhang
e8f1ca6990 修复批量运行爬虫bug 2020-02-22 21:03:14 +08:00
marvzhang
48b8b146da 更新清除选项逻辑 2020-02-22 19:15:43 +08:00
marvzhang
dd3264768a 加入批量运行爬虫 2020-02-22 19:12:24 +08:00
marvzhang
2e6b6e4e70 加入批量删除爬虫任务 2020-02-22 17:35:51 +08:00
marvzhang
eb167ead1e 暂时停用自动检测Scrapy项目功能 2020-02-22 12:48:15 +08:00
marvzhang
ba720b356c 加入批量删除爬虫 2020-02-22 12:44:58 +08:00
marvzhang
00eda5f50a updated dockerpush.yml 2020-02-22 11:31:44 +08:00
marvzhang
548096cf02 优化加载效果 2020-02-21 22:32:59 +08:00
marvzhang
cddc09405b 加入scrapy spider跳转 2020-02-21 22:28:41 +08:00
marvzhang
e2014b10a8 点击爬虫跳转相应文件 pipelines.py 2020-02-21 19:05:32 +08:00
marvzhang
21323f0d28 加入scrapy pipelines支持 2020-02-21 17:12:57 +08:00
marvzhang
e464c48573 更新名称 2020-02-21 16:49:59 +08:00
marvzhang
f701d29531 修复scrapy items问题 2020-02-21 16:46:16 +08:00
marvzhang
38af9e9173 加入scrapy items.py支持 2020-02-21 15:07:54 +08:00
marvzhang
7d5dc27264 支持添加scrapy爬虫时选择模版 2020-02-20 18:30:07 +08:00
marvzhang
1ddac86fe1 加入添加scrapy项目 2020-02-20 17:33:45 +08:00
marvzhang
533dd0c8c2 updated CHANGELOG 2020-02-20 13:51:48 +08:00
marvzhang
5b2311e231 refactor code 2020-02-20 12:28:26 +08:00
marvzhang
17bdbaf8dd 优化爬虫列表页面 2020-02-20 11:52:28 +08:00
marvzhang
6758476e47 Merge remote-tracking branch 'origin/develop' into develop 2020-02-19 17:24:39 +08:00
marvzhang
1ccb8be5de 加入长任务支持 2020-02-19 17:24:16 +08:00
marvzhang
439083c734 加入版本检测 2020-02-19 13:17:01 +08:00
marvzhang
ec8bf33535 加入版本检测 2020-02-19 13:16:46 +08:00
marvzhang
5c76b1ab43 updated CHANGELOG 2020-02-19 10:42:51 +08:00
marvzhang
9b1d477ce8 added dockerpush.yml 2020-02-19 10:31:50 +08:00
marvzhang
f7d2274e44 updated docker_init.sh 2020-02-18 22:30:45 +08:00
marvzhang
77e5a3e088 fixed crawlab-sdk issue 2020-02-18 17:10:08 +08:00
marvzhang
16263a9423 fixed ssh-keygen issue 2020-02-18 15:20:57 +08:00
marvzhang
357a2d26a8 fixed unable to update is_scrapy issue 2020-02-18 14:57:57 +08:00
marvzhang
fb9b6e1619 更改ssh逻辑 2020-02-18 13:42:31 +08:00
marvzhang
53cc430651 添加爬虫加入git 2020-02-18 12:19:46 +08:00
marvzhang
9924db637c code cleanup 2020-02-18 12:17:44 +08:00
marvzhang
2ce289c8f3 加入Git同步 2020-02-18 12:15:40 +08:00
marvzhang
3bb1fe2a74 加入git同步 2020-02-17 18:12:59 +08:00
marvzhang
33efe2fc90 加入统计 2020-02-17 15:24:31 +08:00
marvzhang
aba5f3cf81 更新添加scrapy爬虫 2020-02-17 14:20:42 +08:00
marvzhang
534a29ebc3 加入添加scrapy爬虫 2020-02-17 14:06:16 +08:00
marvzhang
9abf577e74 完成scrapy设置 2020-02-17 11:52:26 +08:00
marvzhang
dec566d1e5 加入settings.py同步 2020-02-17 11:15:16 +08:00
marvzhang
a9277f3412 添加Scrapy设置后端 2020-02-17 10:31:59 +08:00
marvzhang
588c17497e 添加Scrapy设置 2020-02-17 10:30:32 +08:00
marvzhang
5aeadcb7f8 加入自动搜索 2020-02-16 11:25:04 +08:00
marvzhang
fc4d92c4d6 更新scrapy参数 2020-02-16 10:38:41 +08:00
marvzhang
0a9dcd707a 在定时任务中加入Scrapy参数 2020-02-16 10:32:56 +08:00
marvzhang
22d2ec1a6a 加入scrapy参数 2020-02-16 10:23:09 +08:00
marvzhang
3b8702ed58 加入scrapy日志选择 2020-02-15 21:25:21 +08:00