29 Commits

Author	SHA1	Message	Date
marvzhang	3a1b945d09	fixed https://github.com/crawlab-team/crawlab/issues/407	2019-12-30 13:39:36 +08:00
marvzhang	2f47a929d0	解决上传爬虫报错问题	2019-12-27 17:24:23 +08:00
marvzhang	81ff9f0f82	fixed https://github.com/crawlab-team/crawlab/issues/403	2019-12-27 16:06:34 +08:00
marvzhang	59d2d41fe7	修复添加爬虫后直接运行错误	2019-12-26 12:47:56 +08:00
marvzhang	6e0718e646	添加文件管理功能（后端）	2019-12-25 20:49:43 +08:00
marvzhang	8910a74b5d	优化添加爬虫逻辑	2019-12-25 19:46:09 +08:00
marvzhang	a43365c6e7	加入爬虫文件管理后端 API	2019-12-24 09:11:42 +08:00
marvzhang	88118cf894	准备前端可配置爬虫数据	2019-11-27 10:40:37 +08:00
marvzhang	178e46dd93	更新可配置爬虫：添加上传GridFS	2019-11-25 13:36:14 +08:00
陈景阳	0d10d6d045	fix 创建目录错误的问题	2019-10-07 12:21:32 +08:00
陈景阳	8294e7cb4b	完成爬虫的分类	2019-09-30 16:35:36 +08:00
陈景阳	ffd5725f3b	添加爬虫类型	2019-09-30 14:43:48 +08:00
陈景阳	d80642aa0c	fix 删除爬虫的问题	2019-09-30 12:09:37 +08:00
陈景阳	424e2a5e14	fix 重复获取爬虫的问题	2019-09-27 12:07:38 +08:00
陈景阳	7b93d8a67b	fix 上传爬虫名称错误的问题	2019-09-27 11:30:38 +08:00
陈景阳	41e9edf940	完成爬虫列表	2019-09-26 20:53:05 +08:00
陈景阳	5416b7ac60	fix 上传的问题	2019-09-26 19:44:12 +08:00
陈景阳	6df6155daf	优化爬虫获取逻辑	2019-09-26 16:26:32 +08:00
陈景阳	475bf4c69e	优化爬虫获取逻辑	2019-09-26 11:38:13 +08:00
陈景阳	9237e62a48	爬虫逻辑修改为从GridFS获取	2019-09-26 11:28:20 +08:00
陈景阳	9514a8a6af	重构msg的包	2019-09-10 09:32:48 +08:00
陈景阳	e5d33b8982	fix 删除spider没有删除task	2019-09-05 20:07:08 +08:00
yaziming	888a3cab79	refactor(backend): Use more efficient bytes to string methods and remove unnecessary type conversions ... detail: 1. add utils.BytesToString function instead of string() convert bytes to string. 2. use bytes.NewReader instead of strings.NewReader(string(sb)). 3. use w.Body.Bytes() instead of []byte(w.Body.String()).	2019-09-03 15:17:32 +08:00
陈景阳	6675d075f2	fix 删除spider没有删除task的问题	2019-09-02 20:49:00 +08:00
陈景阳	122919658b	fix tmp 目录不会自动创建的问题	2019-08-18 18:45:19 +08:00
Marvin Zhang	dae5d67a10	added login page	2019-07-26 20:04:20 +08:00
Marvin Zhang	eb3c7d9f81	added file edit	2019-07-24 19:51:52 +08:00
Marvin Zhang	b01d265060	added file management	2019-07-24 13:37:03 +08:00
Marvin Zhang	53cebde962	added golang	2019-07-22 12:51:52 +08:00