68 Commits

Author	SHA1	Message	Date
marvzhang	7a75e643ea	加入批量运行爬虫	2020-02-22 19:12:24 +08:00
marvzhang	8c059c912e	加入批量删除爬虫任务	2020-02-22 17:35:51 +08:00
marvzhang	15ea0da0f3	加入批量删除爬虫	2020-02-22 12:44:58 +08:00
marvzhang	a346b64bdc	加入scrapy spider跳转	2020-02-21 22:28:41 +08:00
marvzhang	d7437c4eb1	加入scrapy pipelines支持	2020-02-21 17:12:57 +08:00
marvzhang	d931f9af8e	加入scrapy items.py支持	2020-02-21 15:07:54 +08:00
marvzhang	e4c012cf2f	加入版本检测	2020-02-19 13:16:46 +08:00
marvzhang	0cb2e8134c	加入Git同步	2020-02-18 12:15:40 +08:00
marvzhang	f83a041cd1	加入git同步	2020-02-17 18:12:59 +08:00
marvzhang	bb972e98ef	加入添加scrapy爬虫	2020-02-17 14:06:16 +08:00
marvzhang	dc38642dca	加入settings.py同步	2020-02-17 11:15:16 +08:00
marvzhang	cdaf3363c8	添加Scrapy设置后端	2020-02-17 10:31:59 +08:00
marvzhang	01fefbee88	加入scrapy日志选择	2020-02-15 21:25:21 +08:00
marvzhang	5740774ccc	添加demo爬虫	2020-02-02 22:56:11 +08:00
marvzhang	18c8dd6253	优化项目管理	2020-02-02 14:04:38 +08:00
marvzhang	9d5d0253a8	加入项目管理	2020-02-02 12:29:28 +08:00
陈景阳	100e7631fb	fix 启动报错的问题	2020-02-01 12:53:44 +08:00
陈景阳	fcfaf8ba77	Merge remote-tracking branch 'upstream/develop' into upstream-develop ... # Conflicts: # backend/main.go # frontend/.env.development	2020-01-28 15:51:09 +08:00
陈景阳	092c1a2617	feature 新增全局环境变量	2020-01-28 15:12:12 +08:00
marvzhang	e3f4bcd0ab	updated stats	2020-01-22 11:07:38 +08:00
marvzhang	ef2a4b3531	加入树形结构文件目录	2020-01-15 17:44:11 +08:00
marvzhang	c67c1be52a	加入用户设置与邮件通知	2020-01-13 19:56:13 +08:00
marvzhang	877289e382	fixed https://github.com/crawlab-team/crawlab/issues/423	2020-01-06 12:35:17 +08:00
marvzhang	7835de2641	爬虫详情显示定时任务	2020-01-03 17:20:24 +08:00
marvzhang	33fbf96efb	优化代码	2020-01-03 11:12:46 +08:00
marvzhang	98cc4646a3	优化依赖安装	2020-01-03 10:54:20 +08:00
marvzhang	53c77eb6e9	加入卸载依赖逻辑	2020-01-02 17:38:39 +08:00
marvzhang	836dc12703	加入RPC机制，完成部分依赖安装逻辑	2020-01-02 15:53:53 +08:00
marvzhang	32b1f31340	加入依赖安装前端	2019-12-31 17:05:15 +08:00
marvzhang	5811242af9	更新依赖安装逻辑	2019-12-31 12:02:47 +08:00
marvzhang	01aea28c9c	添加文件管理功能（后端）	2019-12-25 20:49:43 +08:00
marvzhang	fdcf12f866	优化添加爬虫逻辑	2019-12-25 19:46:09 +08:00
marvzhang	27b167bc06	加入爬虫文件管理后端 API	2019-12-24 09:12:35 +08:00
marvzhang	936adf6f76	加入爬虫文件管理后端 API	2019-12-24 09:11:42 +08:00
marvzhang	ed7f933aee	fixed https://github.com/crawlab-team/crawlab/issues/346	2019-12-20 12:45:37 +08:00
hantmac	3ab85ef226	Add API GetVersion	2019-12-19 21:16:25 +08:00
陈景阳	f9f04093d9	完成批量删除Task任务列表	2019-12-08 10:58:02 +08:00
陈景阳	58df4c4a96	Feature 新增定时任务可暂停/运行	2019-12-07 14:02:54 +08:00
hantmac	07ce8e25fd	- 新增authGroup.DELETE("/tasks_by_status", routes.DeleteTaskByStatus) 支持批量删除指定状态的任务 ... - TaskListRequestData中增加Status字段，支持根据task状态进行筛选	2019-12-05 15:12:32 +08:00
hantmac	c230e393d7	fix	2019-12-04 16:48:36 +08:00
marvzhang	98cbccb81e	加入Spiderfile模版	2019-12-03 13:37:41 +08:00
marvzhang	d65e37517e	优化可配置爬虫前端界面	2019-11-28 21:36:17 +08:00
marvzhang	8210fa6c20	加入修改可配置POST接口	2019-11-28 16:08:13 +08:00
marvzhang	1674dce3bd	准备前端可配置爬虫数据	2019-11-27 10:40:37 +08:00
marvzhang	0d8ce3a29f	准备可配置爬虫后端数据	2019-11-26 13:38:54 +08:00
marvzhang	7003951561	fixed https://github.com/crawlab-team/crawlab/issues/315	2019-11-24 12:20:44 +08:00
marvzhang	7b86d35a0f	code cleanup	2019-11-23 18:16:24 +08:00
marvzhang	607ce70f5c	准备可配置爬虫	2019-11-23 18:13:47 +08:00
yaziming	63fab3917b	feat(backend): support server graceful down ... 1.support server graceful down	2019-10-09 11:21:01 +08:00
陈景阳	cdd7696295	添加爬虫类型	2019-09-30 14:43:48 +08:00