陈景阳
02f744eb96
fix
2019-10-11 22:48:06 +08:00
陈景阳
c00bebbf95
优化节点信息
2019-10-11 21:57:25 +08:00
陈景阳
c58f213264
添加日志打印
2019-10-10 19:56:04 +08:00
陈景阳
efd742f55d
修改版本号
2019-10-08 20:26:08 +08:00
陈景阳
45c2f85856
fix 状态的问题
2019-10-08 20:20:48 +08:00
陈景阳
86e33fc43a
fix 状态的问题
2019-10-08 20:16:49 +08:00
陈景阳
80c70ec8ae
fix 状态错误的问题
2019-10-08 19:41:29 +08:00
陈景阳
7c75c24f65
fix md5值不一致的问题
2019-10-07 12:49:37 +08:00
陈景阳
0d10d6d045
fix 创建目录错误的问题
2019-10-07 12:21:32 +08:00
陈景阳
2e28921778
fix 编译错误的问题
2019-09-30 19:24:35 +08:00
陈景阳
8294e7cb4b
完成爬虫的分类
2019-09-30 16:35:36 +08:00
陈景阳
ffd5725f3b
添加爬虫类型
2019-09-30 14:43:48 +08:00
陈景阳
d80642aa0c
fix 删除爬虫的问题
2019-09-30 12:09:37 +08:00
陈景阳
41123695ef
fix 无法删除爬虫的问题
2019-09-30 09:23:42 +08:00
陈景阳
31c708434d
打印一些错误的日志
2019-09-27 14:16:41 +08:00
陈景阳
f08ef3765f
新增几个方法
2019-09-27 12:31:47 +08:00
陈景阳
424e2a5e14
fix 重复获取爬虫的问题
2019-09-27 12:07:38 +08:00
陈景阳
59fcf7e9b0
fix 重复获取爬虫的问题
2019-09-27 12:00:00 +08:00
陈景阳
725c6ca994
fix 上传爬虫错误的问题
2019-09-27 11:49:57 +08:00
陈景阳
7b93d8a67b
fix 上传爬虫名称错误的问题
2019-09-27 11:30:38 +08:00
陈景阳
001147f34d
fix
2019-09-27 10:28:46 +08:00
陈景阳
d977252eba
fix
2019-09-27 10:14:48 +08:00
陈景阳
412e0fd983
fix bug
2019-09-26 21:13:25 +08:00
陈景阳
f14085666b
完成爬虫列表
2019-09-26 20:54:50 +08:00
陈景阳
41e9edf940
完成爬虫列表
2019-09-26 20:53:05 +08:00
陈景阳
5416b7ac60
fix 上传的问题
2019-09-26 19:44:12 +08:00
陈景阳
79ee09aacb
完成爬虫获取
2019-09-26 19:12:02 +08:00
陈景阳
d27f3c04d6
fix 可能直接退出的问题
2019-09-26 16:49:01 +08:00
陈景阳
6c37731cca
优化爬虫获取逻辑
2019-09-26 16:43:32 +08:00
陈景阳
6df6155daf
优化爬虫获取逻辑
2019-09-26 16:26:32 +08:00
陈景阳
475bf4c69e
优化爬虫获取逻辑
2019-09-26 11:38:13 +08:00
陈景阳
9237e62a48
爬虫逻辑修改为从GridFS获取
2019-09-26 11:28:20 +08:00
陈景阳
c37c0b963b
fix 无法终止任务的问题
2019-09-26 10:29:58 +08:00
陈景阳
cde06a0000
fix 无法终止任务的问题
2019-09-26 10:23:08 +08:00
陈景阳
52b7577e0e
添加日志打印
2019-09-26 09:37:10 +08:00
陈景阳
48dcf5a952
添加日志打印
2019-09-25 16:19:58 +08:00
陈景阳
613b5eb139
fix 无法获取task的错误
2019-09-25 15:11:27 +08:00
陈景阳
fe221ffd6f
fix
2019-09-25 14:38:46 +08:00
陈景阳
7e17adf6b0
fix 空指针引用
2019-09-10 14:47:23 +08:00
陈景阳
f20039fefd
fix 消息无法订阅问题
...
fix 可能出现重复爬虫的问题
2019-09-10 14:26:50 +08:00
陈景阳
27f36cf91f
删除日志
2019-09-10 09:51:27 +08:00
陈景阳
9514a8a6af
重构msg的包
2019-09-10 09:32:48 +08:00
陈景阳
e5d33b8982
fix 删除spider没有删除task
2019-09-05 20:07:08 +08:00
Marvin Zhang
3eee129a7c
added param to task
2019-09-04 20:13:12 +08:00
hantmac
fb58cc1a28
bug fix:fix data race caused by LockList
2019-09-04 13:51:02 +08:00
Marvin Zhang
e93a471e89
Merge pull request #208 from yaziming/v0.4.0-imporve-error-response
...
feat(backend): add some feat for error message system
2019-09-03 15:25:04 +08:00
yaziming
8ee33d3762
feat(backend): add some feat for error message system
...
errors support custom http code and support return invalid validated
error
2019-09-03 15:23:08 +08:00
yaziming
888a3cab79
refactor(backend): Use more efficient bytes to string methods and remove unnecessary type conversions
...
detail:
1. add utils.BytesToString function instead of string() convert bytes to string.
2. use bytes.NewReader instead of strings.NewReader(string(sb)).
3. use w.Body.Bytes() instead of []byte(w.Body.String()).
2019-09-03 15:17:32 +08:00
hantmac
2ffd1774bf
bug fix:fix go test ./.. bug
2019-09-03 12:47:18 +08:00
陈景阳
4255b2f6b6
还原代码
2019-09-03 09:06:04 +08:00