Commit Graph

156 Commits

Author SHA1 Message Date
marvzhang
d0e7bcbd8f fixed https://github.com/crawlab-team/crawlab/issues/670 2020-04-21 13:31:11 +08:00
marvzhang
18307f00b3 加入API Token后端 2020-04-20 11:43:58 +08:00
marvzhang
b0a930ca32 结果集自动生成 2020-04-19 17:49:21 +08:00
marvzhang
6508e80de5 加入日志自动删除 2020-04-19 13:50:06 +08:00
marvzhang
f8b229502f 不展示无项目 2020-04-19 12:08:08 +08:00
marvzhang
5a8da7ed29 优化日志异常展示 2020-04-19 11:07:39 +08:00
marvzhang
59b42ddde2 加入日志异常检测 2020-04-19 10:32:36 +08:00
marvzhang
624972fc73 加入日志分页 2020-04-15 13:48:27 +08:00
marvzhang
9c433b528e fixed https://github.com/crawlab-team/crawlab/issues/684 2020-04-14 16:39:30 +08:00
marvzhang
7057608ef7 迁移日志到MongoDB 2020-04-01 16:52:23 +08:00
marvzhang
1ddeaef69b 加入重试 2020-03-29 15:45:25 +08:00
marvzhang
bff9356a0f 支持去重 2020-03-29 11:17:38 +08:00
marvzhang
50bd3fd1dd updated CHANGELOG 2020-03-29 09:22:08 +08:00
marvzhang
b0a9f61003 fixed http://localhost:8080/#/spiders/5e7ea8fbec047d0a2ebfcc3b 2020-03-28 12:33:20 +08:00
marvzhang
83c657dc49 fixed https://github.com/crawlab-team/crawlab/issues/643 https://github.com/crawlab-team/crawlab/issues/640 2020-03-24 08:19:45 +08:00
marvzhang
38bf4f89ca 优化主页指标展示 2020-03-22 09:25:54 +08:00
marvzhang
fa62e1a2dc 加入权限管理 2020-03-20 17:43:11 +08:00
marvzhang
1e2b580ed4 加入ScheduleId到Task 2020-03-20 08:33:30 +08:00
marvzhang
6b2d51fb1e 修复可配置爬虫无法保存问题 2020-03-20 08:27:54 +08:00
marvzhang
40ad7fb9f3 加入挑战 2020-03-19 18:56:59 +08:00
marvzhang
daef59be07 updated contributors 2020-03-19 11:13:25 +08:00
marvzhang
e0d953d18f 用户挑战基础准备 2020-03-18 18:00:25 +08:00
marvzhang
994db8d03c 加入Git Checkout
功能
2020-03-11 15:18:42 +08:00
marvzhang
b65c03107e 支持Git Log 2020-03-11 14:58:51 +08:00
marvzhang
6c3bcaea9c 加入git 日志 2020-03-11 14:01:02 +08:00
marvzhang
3123752038 配置加载demo爬虫 2020-03-11 08:16:52 +08:00
marvzhang
d2ed7e6379 加入配置只在工作节点上调度 2020-03-11 08:05:37 +08:00
marvzhang
af9b38c423 重构安装卸载依赖RPC逻辑 2020-03-10 14:54:28 +08:00
marvzhang
591c8d3417 重构获取已安装依赖列表RPC逻辑 2020-03-10 13:48:08 +08:00
marvzhang
34d3e8b276 重构RPC逻辑 2020-03-10 12:08:26 +08:00
marvzhang
7da165d8e6 尝试修复工作节点未找到安装语言问题 2020-03-07 12:15:42 +08:00
hantmac
3b41b086e6 bug fix issue 603 2020-03-02 10:45:29 +08:00
marvzhang
4f24ac15a1 加入帮助文档 2020-03-01 20:55:52 +08:00
marvzhang
11defc16c2 默认关闭教程 2020-03-01 10:24:31 +08:00
marvzhang
7315deefee 加入复制爬虫 2020-02-24 09:12:03 +08:00
marvzhang
6000667b7d updated dockerpush.yml 2020-02-23 09:19:18 +08:00
marvzhang
dd3264768a 加入批量运行爬虫 2020-02-22 19:12:24 +08:00
marvzhang
2e6b6e4e70 加入批量删除爬虫任务 2020-02-22 17:35:51 +08:00
marvzhang
ba720b356c 加入批量删除爬虫 2020-02-22 12:44:58 +08:00
marvzhang
cddc09405b 加入scrapy spider跳转 2020-02-21 22:28:41 +08:00
marvzhang
21323f0d28 加入scrapy pipelines支持 2020-02-21 17:12:57 +08:00
marvzhang
38af9e9173 加入scrapy items.py支持 2020-02-21 15:07:54 +08:00
marvzhang
1ddac86fe1 加入添加scrapy项目 2020-02-20 17:33:45 +08:00
marvzhang
17bdbaf8dd 优化爬虫列表页面 2020-02-20 11:52:28 +08:00
marvzhang
ec8bf33535 加入版本检测 2020-02-19 13:16:46 +08:00
marvzhang
2ce289c8f3 加入Git同步 2020-02-18 12:15:40 +08:00
marvzhang
3bb1fe2a74 加入git同步 2020-02-17 18:12:59 +08:00
marvzhang
534a29ebc3 加入添加scrapy爬虫 2020-02-17 14:06:16 +08:00
marvzhang
dec566d1e5 加入settings.py同步 2020-02-17 11:15:16 +08:00
marvzhang
a9277f3412 添加Scrapy设置后端 2020-02-17 10:31:59 +08:00