51 Commits

Author	SHA1	Message	Date
marvzhang	ded5703b13	准备前端可配置爬虫数据	2019-11-27 12:32:25 +08:00
marvzhang	88118cf894	准备前端可配置爬虫数据	2019-11-27 10:40:37 +08:00
marvzhang	bc5203267a	加入xpath	2019-11-26 13:02:49 +08:00
marvzhang	b8592b89ce	更新可配置爬虫，修复一些问题	2019-11-24 19:45:21 +08:00
marvzhang	6a07afa279	更新可配置爬虫，修复一些问题	2019-11-24 18:51:32 +08:00
marvzhang	38d103da39	加入可配置爬虫	2019-11-24 17:57:12 +08:00
marvzhang	442396a5ff	fixed https://github.com/crawlab-team/crawlab/issues/315	2019-11-24 12:20:44 +08:00
陈景阳	484a7ec17c	fix 优化代码	2019-10-28 12:03:02 +08:00
陈景阳	0648dacf4b	读取日志修改为2M	2019-10-28 11:38:39 +08:00
暗音	3937cba64f	Merge branch 'develop' into develop	2019-10-28 11:06:13 +08:00
陈景阳	06d659b77a	修改日志获取问题	2019-10-17 17:54:19 +08:00
陈景阳	05136b0fac	fix 定时任务参数错误的问题	2019-10-16 15:27:12 +08:00
陈景阳	cd7f6e66b4	fix 定时任务管理	2019-10-11 23:53:07 +08:00
陈景阳	02f744eb96	fix	2019-10-11 22:48:06 +08:00
陈景阳	c00bebbf95	优化节点信息	2019-10-11 21:57:25 +08:00
yaziming	2f6b517356	refactor(all): refactor code ... remove redundant code and some code refactor	2019-10-11 16:01:57 +08:00
陈景阳	8294e7cb4b	完成爬虫的分类	2019-09-30 16:35:36 +08:00
陈景阳	ffd5725f3b	添加爬虫类型	2019-09-30 14:43:48 +08:00
陈景阳	d80642aa0c	fix 删除爬虫的问题	2019-09-30 12:09:37 +08:00
陈景阳	31c708434d	打印一些错误的日志	2019-09-27 14:16:41 +08:00
陈景阳	f08ef3765f	新增几个方法	2019-09-27 12:31:47 +08:00
陈景阳	59fcf7e9b0	fix 重复获取爬虫的问题	2019-09-27 12:00:00 +08:00
陈景阳	7b93d8a67b	fix 上传爬虫名称错误的问题	2019-09-27 11:30:38 +08:00
陈景阳	d977252eba	fix	2019-09-27 10:14:48 +08:00
陈景阳	41e9edf940	完成爬虫列表	2019-09-26 20:53:05 +08:00
陈景阳	5416b7ac60	fix 上传的问题	2019-09-26 19:44:12 +08:00
陈景阳	79ee09aacb	完成爬虫获取	2019-09-26 19:12:02 +08:00
陈景阳	6df6155daf	优化爬虫获取逻辑	2019-09-26 16:26:32 +08:00
陈景阳	fe221ffd6f	fix	2019-09-25 14:38:46 +08:00
陈景阳	9514a8a6af	重构msg的包	2019-09-10 09:32:48 +08:00
陈景阳	e5d33b8982	fix 删除spider没有删除task	2019-09-05 20:07:08 +08:00
Marvin Zhang	3eee129a7c	added param to task	2019-09-04 20:13:12 +08:00
陈景阳	6675d075f2	fix 删除spider没有删除task的问题	2019-09-02 20:49:00 +08:00
陈景阳	69fc10fcc3	fix 如果从dir读取爬虫为空，则移除所有的爬虫	2019-09-02 17:37:48 +08:00
陈景阳	1e37d714b0	添加排序	2019-09-02 10:40:16 +08:00
陈景阳	7a901ff257	添加备注 ... 添加上次运行状态	2019-08-31 16:09:41 +08:00
陈景阳	c0201f566a	优化代码	2019-08-31 15:59:43 +08:00
陈景阳	494601ab62	fix 节点注册异常情况	2019-08-31 13:49:34 +08:00
陈景阳	0186d08112	删除爬虫顺带删除文件	2019-08-27 09:39:16 +08:00
陈景阳	d913d7c40f	fix TagsView.vue 导致前端报错的问题 ... update 节点注册使用独立的key字段，而不是使用mac字段	2019-08-21 14:37:55 +08:00
陈景阳	02adbd4edb	FIX 当爬虫为空的时候，导致前端列表报错	2019-08-01 11:32:39 +08:00
Marvin Zhang	8c7b597a3b	updated Dockerfile	2019-07-28 15:27:44 +08:00
Marvin Zhang	66a33e83ac	optimized user auth	2019-07-27 14:55:03 +08:00
Marvin Zhang	eea85faa5c	added user management	2019-07-27 00:56:37 +08:00
Marvin Zhang	be9339ff3f	added user login/signup	2019-07-26 23:02:30 +08:00
Marvin Zhang	253c643e8e	added spider stats	2019-07-26 17:07:24 +08:00
Marvin Zhang	b5fd0f411b	added network diagram	2019-07-24 21:03:30 +08:00
Marvin Zhang	b01d265060	added file management	2019-07-24 13:37:03 +08:00
Marvin Zhang	072e60e17e	fetch sysinfo from remote	2019-07-22 22:25:29 +08:00
Marvin Zhang	8df06ba278	added sysinfo	2019-07-22 13:33:09 +08:00