61 Commits

Author	SHA1	Message	Date
hantmac	fee7eff911	Add swagger docs	2020-05-01 23:11:51 +08:00
marvzhang	9c433b528e	fixed https://github.com/crawlab-team/crawlab/issues/684	2020-04-14 16:39:30 +08:00
marvzhang	bff9356a0f	支持去重	2020-03-29 11:17:38 +08:00
marvzhang	b0a9f61003	fixed http://localhost:8080/#/spiders/5e7ea8fbec047d0a2ebfcc3b	2020-03-28 12:33:20 +08:00
marvzhang	83c657dc49	fixed https://github.com/crawlab-team/crawlab/issues/643 https://github.com/crawlab-team/crawlab/issues/640	2020-03-24 08:19:45 +08:00
marvzhang	fa62e1a2dc	加入权限管理	2020-03-20 17:43:11 +08:00
marvzhang	1e2b580ed4	加入ScheduleId到Task	2020-03-20 08:33:30 +08:00
marvzhang	6b2d51fb1e	修复可配置爬虫无法保存问题	2020-03-20 08:27:54 +08:00
marvzhang	daef59be07	updated contributors	2020-03-19 11:13:25 +08:00
hantmac	3b41b086e6	bug fix issue 603	2020-03-02 10:45:29 +08:00
marvzhang	7315deefee	加入复制爬虫	2020-02-24 09:12:03 +08:00
marvzhang	6000667b7d	updated dockerpush.yml	2020-02-23 09:19:18 +08:00
marvzhang	dd3264768a	加入批量运行爬虫	2020-02-22 19:12:24 +08:00
marvzhang	2e6b6e4e70	加入批量删除爬虫任务	2020-02-22 17:35:51 +08:00
marvzhang	ba720b356c	加入批量删除爬虫	2020-02-22 12:44:58 +08:00
marvzhang	cddc09405b	加入scrapy spider跳转	2020-02-21 22:28:41 +08:00
marvzhang	21323f0d28	加入scrapy pipelines支持	2020-02-21 17:12:57 +08:00
marvzhang	38af9e9173	加入scrapy items.py支持	2020-02-21 15:07:54 +08:00
marvzhang	1ddac86fe1	加入添加scrapy项目	2020-02-20 17:33:45 +08:00
marvzhang	17bdbaf8dd	优化爬虫列表页面	2020-02-20 11:52:28 +08:00
marvzhang	2ce289c8f3	加入Git同步	2020-02-18 12:15:40 +08:00
marvzhang	3bb1fe2a74	加入git同步	2020-02-17 18:12:59 +08:00
marvzhang	534a29ebc3	加入添加scrapy爬虫	2020-02-17 14:06:16 +08:00
marvzhang	dec566d1e5	加入settings.py同步	2020-02-17 11:15:16 +08:00
marvzhang	a9277f3412	添加Scrapy设置后端	2020-02-17 10:31:59 +08:00
marvzhang	d46f43b05b	加入scrapy爬虫支持	2020-02-15 18:28:37 +08:00
marvzhang	8aed6c1de7	fixed https://github.com/crawlab-team/crawlab/issues/524	2020-02-09 09:02:13 +08:00
marvzhang	0b22e55e93	finish up project	2020-02-02 13:29:56 +08:00
marvzhang	172dfe6c7e	调整在线编辑文件	2020-01-15 20:10:43 +08:00
marvzhang	ae2ff69b45	加入树形结构文件目录	2020-01-15 17:44:11 +08:00
marvzhang	2c3f440c8e	加入爬虫列表排序	2020-01-06 13:18:29 +08:00
marvzhang	44c0b050f7	爬虫详情显示定时任务	2020-01-03 17:20:24 +08:00
marvzhang	3a1b945d09	fixed https://github.com/crawlab-team/crawlab/issues/407	2019-12-30 13:39:36 +08:00
marvzhang	2f47a929d0	解决上传爬虫报错问题	2019-12-27 17:24:23 +08:00
marvzhang	81ff9f0f82	fixed https://github.com/crawlab-team/crawlab/issues/403	2019-12-27 16:06:34 +08:00
marvzhang	59d2d41fe7	修复添加爬虫后直接运行错误	2019-12-26 12:47:56 +08:00
marvzhang	6e0718e646	添加文件管理功能（后端）	2019-12-25 20:49:43 +08:00
marvzhang	8910a74b5d	优化添加爬虫逻辑	2019-12-25 19:46:09 +08:00
marvzhang	a43365c6e7	加入爬虫文件管理后端 API	2019-12-24 09:11:42 +08:00
marvzhang	88118cf894	准备前端可配置爬虫数据	2019-11-27 10:40:37 +08:00
marvzhang	178e46dd93	更新可配置爬虫：添加上传GridFS	2019-11-25 13:36:14 +08:00
陈景阳	0d10d6d045	fix 创建目录错误的问题	2019-10-07 12:21:32 +08:00
陈景阳	8294e7cb4b	完成爬虫的分类	2019-09-30 16:35:36 +08:00
陈景阳	ffd5725f3b	添加爬虫类型	2019-09-30 14:43:48 +08:00
陈景阳	d80642aa0c	fix 删除爬虫的问题	2019-09-30 12:09:37 +08:00
陈景阳	424e2a5e14	fix 重复获取爬虫的问题	2019-09-27 12:07:38 +08:00
陈景阳	7b93d8a67b	fix 上传爬虫名称错误的问题	2019-09-27 11:30:38 +08:00
陈景阳	41e9edf940	完成爬虫列表	2019-09-26 20:53:05 +08:00
陈景阳	5416b7ac60	fix 上传的问题	2019-09-26 19:44:12 +08:00
陈景阳	6df6155daf	优化爬虫获取逻辑	2019-09-26 16:26:32 +08:00