Commit Graph

815 Commits

Author SHA1 Message Date
暗音
cefaef0017 Merge pull request #234 from wo10378931/develop
Develop
2019-09-30 16:51:31 +08:00
陈景阳
ffd6059f14 添加版本号 2019-09-30 16:50:16 +08:00
陈景阳
dfdfdc890d 更新版本号 2019-09-30 16:44:35 +08:00
暗音
95a5805be2 Merge pull request #232 from wo10378931/develop
Develop
2019-09-30 16:40:20 +08:00
陈景阳
8294e7cb4b 完成爬虫的分类 2019-09-30 16:35:36 +08:00
陈景阳
a12f4ec3ac 添加爬虫列下 2019-09-30 14:44:10 +08:00
陈景阳
ffd5725f3b 添加爬虫类型 2019-09-30 14:43:48 +08:00
陈景阳
d80642aa0c fix 删除爬虫的问题 2019-09-30 12:09:37 +08:00
陈景阳
41123695ef fix 无法删除爬虫的问题 2019-09-30 09:23:42 +08:00
陈景阳
31c708434d 打印一些错误的日志 2019-09-27 14:16:41 +08:00
陈景阳
f08ef3765f 新增几个方法 2019-09-27 12:31:47 +08:00
陈景阳
424e2a5e14 fix 重复获取爬虫的问题 2019-09-27 12:07:38 +08:00
陈景阳
59fcf7e9b0 fix 重复获取爬虫的问题 2019-09-27 12:00:00 +08:00
陈景阳
725c6ca994 fix 上传爬虫错误的问题 2019-09-27 11:49:57 +08:00
陈景阳
7b93d8a67b fix 上传爬虫名称错误的问题 2019-09-27 11:30:38 +08:00
陈景阳
001147f34d fix 2019-09-27 10:28:46 +08:00
陈景阳
d977252eba fix 2019-09-27 10:14:48 +08:00
陈景阳
412e0fd983 fix bug 2019-09-26 21:13:25 +08:00
陈景阳
f14085666b 完成爬虫列表 2019-09-26 20:54:50 +08:00
陈景阳
41e9edf940 完成爬虫列表 2019-09-26 20:53:05 +08:00
陈景阳
277e52ea61 爬虫列表 2019-09-26 20:52:45 +08:00
陈景阳
5416b7ac60 fix 上传的问题 2019-09-26 19:44:12 +08:00
陈景阳
79ee09aacb 完成爬虫获取 2019-09-26 19:12:02 +08:00
陈景阳
d27f3c04d6 fix 可能直接退出的问题 2019-09-26 16:49:01 +08:00
陈景阳
6c37731cca 优化爬虫获取逻辑 2019-09-26 16:43:32 +08:00
陈景阳
6df6155daf 优化爬虫获取逻辑 2019-09-26 16:26:32 +08:00
陈景阳
475bf4c69e 优化爬虫获取逻辑 2019-09-26 11:38:13 +08:00
陈景阳
9237e62a48 爬虫逻辑修改为从GridFS获取 2019-09-26 11:28:20 +08:00
陈景阳
c37c0b963b fix 无法终止任务的问题 2019-09-26 10:29:58 +08:00
陈景阳
cde06a0000 fix 无法终止任务的问题 2019-09-26 10:23:08 +08:00
陈景阳
52b7577e0e 添加日志打印 2019-09-26 09:37:10 +08:00
陈景阳
48dcf5a952 添加日志打印 2019-09-25 16:19:58 +08:00
陈景阳
613b5eb139 fix 无法获取task的错误 2019-09-25 15:11:27 +08:00
陈景阳
fe221ffd6f fix 2019-09-25 14:38:46 +08:00
暗音
f3fd19d198 Merge pull request #3 from crawlab-team/develop
Develop
2019-09-25 09:27:15 +08:00
Marvin Zhang
3f3c83767a Merge pull request #224 from wo10378931/develop
Develop
2019-09-10 16:24:10 +08:00
陈景阳
7e17adf6b0 fix 空指针引用 2019-09-10 14:47:23 +08:00
陈景阳
f20039fefd fix 消息无法订阅问题
fix 可能出现重复爬虫的问题
2019-09-10 14:26:50 +08:00
Marvin Zhang
04e13004dd Merge pull request #223 from yaziming/fix-redis-subscrible-failed-problem
fix(backend):  redis subscrible channel name is wrong.
2019-09-10 13:08:05 +08:00
yaziming
f36e2416c5 fix(all): fix redis subscrible wrong channel
fix redis subscrible wrong channel

Closes #222
2019-09-10 12:55:14 +08:00
陈景阳
27f36cf91f 删除日志 2019-09-10 09:51:27 +08:00
陈景阳
9514a8a6af 重构msg的包 2019-09-10 09:32:48 +08:00
陈景阳
e5d33b8982 fix 删除spider没有删除task 2019-09-05 20:07:08 +08:00
Marvin Zhang
07cd8fb01a Merge pull request #214 from crawlab-team/master
Master to Develop
2019-09-04 20:57:15 +08:00
Marvin Zhang
35e198b885 Merge pull request #213 from yaziming/forked_master
Merge  master
2019-09-04 20:56:16 +08:00
yaziming
39d8a9ffd5 Merge remote-tracking branch 'forked/develop' into forked_master 2019-09-04 20:42:01 +08:00
yaziming
6dc687192e Revert "Revert "V0.4.0 imporve error response""
This reverts commit 9744f45e86.
2019-09-04 20:41:37 +08:00
Marvin Zhang
eb1a80ec2d added param to task 2019-09-04 20:13:28 +08:00
Marvin Zhang
3eee129a7c added param to task 2019-09-04 20:13:12 +08:00
Marvin Zhang
992f3f4d86 Merge pull request #210 from hantmac/develop
bug fix:fix data race caused by LockList
2019-09-04 14:14:45 +08:00