陈景阳
ecab6dfa03
fix 时区的问题
2019-10-16 11:26:15 +08:00
陈景阳
5da64fd00b
fix 一些东西
2019-10-16 10:11:00 +08:00
陈景阳
20fdb5f2d3
优化代码
2019-10-16 09:45:50 +08:00
陈景阳
a00fcee801
代码优化
2019-10-15 17:23:03 +08:00
陈景阳
61d32857a7
fix worker无法获取到当前Node的问题
2019-10-12 07:16:11 +08:00
陈景阳
04924b2f19
fix 定时任务管理
2019-10-11 23:22:25 +08:00
陈景阳
02f744eb96
fix
2019-10-11 22:48:06 +08:00
陈景阳
c00bebbf95
优化节点信息
2019-10-11 21:57:25 +08:00
陈景阳
c58f213264
添加日志打印
2019-10-10 19:56:04 +08:00
陈景阳
efd742f55d
修改版本号
2019-10-08 20:26:08 +08:00
陈景阳
45c2f85856
fix 状态的问题
2019-10-08 20:20:48 +08:00
陈景阳
86e33fc43a
fix 状态的问题
2019-10-08 20:16:49 +08:00
陈景阳
80c70ec8ae
fix 状态错误的问题
2019-10-08 19:41:29 +08:00
陈景阳
7c75c24f65
fix md5值不一致的问题
2019-10-07 12:49:37 +08:00
陈景阳
0d10d6d045
fix 创建目录错误的问题
2019-10-07 12:21:32 +08:00
陈景阳
d80642aa0c
fix 删除爬虫的问题
2019-09-30 12:09:37 +08:00
陈景阳
41123695ef
fix 无法删除爬虫的问题
2019-09-30 09:23:42 +08:00
陈景阳
31c708434d
打印一些错误的日志
2019-09-27 14:16:41 +08:00
陈景阳
725c6ca994
fix 上传爬虫错误的问题
2019-09-27 11:49:57 +08:00
陈景阳
001147f34d
fix
2019-09-27 10:28:46 +08:00
陈景阳
d977252eba
fix
2019-09-27 10:14:48 +08:00
陈景阳
412e0fd983
fix bug
2019-09-26 21:13:25 +08:00
陈景阳
41e9edf940
完成爬虫列表
2019-09-26 20:53:05 +08:00
陈景阳
5416b7ac60
fix 上传的问题
2019-09-26 19:44:12 +08:00
陈景阳
79ee09aacb
完成爬虫获取
2019-09-26 19:12:02 +08:00
陈景阳
d27f3c04d6
fix 可能直接退出的问题
2019-09-26 16:49:01 +08:00
陈景阳
6c37731cca
优化爬虫获取逻辑
2019-09-26 16:43:32 +08:00
陈景阳
6df6155daf
优化爬虫获取逻辑
2019-09-26 16:26:32 +08:00
陈景阳
475bf4c69e
优化爬虫获取逻辑
2019-09-26 11:38:13 +08:00
陈景阳
9237e62a48
爬虫逻辑修改为从GridFS获取
2019-09-26 11:28:20 +08:00
陈景阳
c37c0b963b
fix 无法终止任务的问题
2019-09-26 10:29:58 +08:00
陈景阳
cde06a0000
fix 无法终止任务的问题
2019-09-26 10:23:08 +08:00
陈景阳
52b7577e0e
添加日志打印
2019-09-26 09:37:10 +08:00
陈景阳
48dcf5a952
添加日志打印
2019-09-25 16:19:58 +08:00
陈景阳
613b5eb139
fix 无法获取task的错误
2019-09-25 15:11:27 +08:00
陈景阳
fe221ffd6f
fix
2019-09-25 14:38:46 +08:00
陈景阳
7e17adf6b0
fix 空指针引用
2019-09-10 14:47:23 +08:00
陈景阳
f20039fefd
fix 消息无法订阅问题
...
fix 可能出现重复爬虫的问题
2019-09-10 14:26:50 +08:00
陈景阳
27f36cf91f
删除日志
2019-09-10 09:51:27 +08:00
陈景阳
9514a8a6af
重构msg的包
2019-09-10 09:32:48 +08:00
Marvin Zhang
3eee129a7c
added param to task
2019-09-04 20:13:12 +08:00
hantmac
fb58cc1a28
bug fix:fix data race caused by LockList
2019-09-04 13:51:02 +08:00
Marvin Zhang
e93a471e89
Merge pull request #208 from yaziming/v0.4.0-imporve-error-response
...
feat(backend): add some feat for error message system
2019-09-03 15:25:04 +08:00
yaziming
8ee33d3762
feat(backend): add some feat for error message system
...
errors support custom http code and support return invalid validated
error
2019-09-03 15:23:08 +08:00
yaziming
888a3cab79
refactor(backend): Use more efficient bytes to string methods and remove unnecessary type conversions
...
detail:
1. add utils.BytesToString function instead of string() convert bytes to string.
2. use bytes.NewReader instead of strings.NewReader(string(sb)).
3. use w.Body.Bytes() instead of []byte(w.Body.String()).
2019-09-03 15:17:32 +08:00
陈景阳
4255b2f6b6
还原代码
2019-09-03 09:06:04 +08:00
陈景阳
9e9b117669
Merge branch 'develop' of https://github.com/crawlab-team/crawlab into develop
2019-09-03 08:57:21 +08:00
陈景阳
41c3b98333
还原代码
2019-09-02 18:14:34 +08:00
陈景阳
45aaaa2c46
fix 无法正常删除有问题的爬虫
2019-09-02 18:04:47 +08:00
陈景阳
69fc10fcc3
fix 如果从dir读取爬虫为空,则移除所有的爬虫
2019-09-02 17:37:48 +08:00