Commit Graph

84 Commits

Author SHA1 Message Date
hantmac
f59ca2b605 Add swagger docs 2020-05-01 23:11:51 +08:00
hantmac
b109662466 support crawlab runtime log to ES 2020-04-27 17:18:57 +08:00
marvzhang
dc1b158afc 加入API Token后端 2020-04-20 11:43:58 +08:00
marvzhang
7764b9fb82 加入日志异常检测 2020-04-19 10:32:36 +08:00
marvzhang
63c95f8618 迁移日志到MongoDB 2020-04-01 16:52:23 +08:00
marvzhang
9ac1bfc588 加入重试 2020-03-29 15:45:25 +08:00
marvzhang
7e343cdde1 加入权限管理 2020-03-20 17:43:11 +08:00
marvzhang
e33dfd7992 加入挑战 2020-03-19 18:56:59 +08:00
marvzhang
e3a059eb7c updated contributors 2020-03-19 11:13:25 +08:00
marvzhang
a88e90e025 用户挑战基础准备 2020-03-18 18:00:25 +08:00
marvzhang
fa94034311 加入Git Checkout
功能
2020-03-11 15:18:42 +08:00
marvzhang
03d74ddd14 加入git 日志 2020-03-11 14:01:02 +08:00
marvzhang
b167107b5c 加入配置只在工作节点上调度 2020-03-11 08:05:37 +08:00
marvzhang
e5b4ac6310 重构RPC逻辑 2020-03-10 12:08:26 +08:00
marvzhang
2712d7207d 加入帮助文档 2020-03-01 20:55:52 +08:00
marvzhang
57f1edc207 updated dockerpush.yml 2020-02-23 09:19:18 +08:00
marvzhang
7a75e643ea 加入批量运行爬虫 2020-02-22 19:12:24 +08:00
marvzhang
8c059c912e 加入批量删除爬虫任务 2020-02-22 17:35:51 +08:00
marvzhang
15ea0da0f3 加入批量删除爬虫 2020-02-22 12:44:58 +08:00
marvzhang
a346b64bdc 加入scrapy spider跳转 2020-02-21 22:28:41 +08:00
marvzhang
d7437c4eb1 加入scrapy pipelines支持 2020-02-21 17:12:57 +08:00
marvzhang
d931f9af8e 加入scrapy items.py支持 2020-02-21 15:07:54 +08:00
marvzhang
e4c012cf2f 加入版本检测 2020-02-19 13:16:46 +08:00
marvzhang
0cb2e8134c 加入Git同步 2020-02-18 12:15:40 +08:00
marvzhang
f83a041cd1 加入git同步 2020-02-17 18:12:59 +08:00
marvzhang
bb972e98ef 加入添加scrapy爬虫 2020-02-17 14:06:16 +08:00
marvzhang
dc38642dca 加入settings.py同步 2020-02-17 11:15:16 +08:00
marvzhang
cdaf3363c8 添加Scrapy设置后端 2020-02-17 10:31:59 +08:00
marvzhang
01fefbee88 加入scrapy日志选择 2020-02-15 21:25:21 +08:00
marvzhang
5740774ccc 添加demo爬虫 2020-02-02 22:56:11 +08:00
marvzhang
18c8dd6253 优化项目管理 2020-02-02 14:04:38 +08:00
marvzhang
9d5d0253a8 加入项目管理 2020-02-02 12:29:28 +08:00
陈景阳
100e7631fb fix 启动报错的问题 2020-02-01 12:53:44 +08:00
陈景阳
fcfaf8ba77 Merge remote-tracking branch 'upstream/develop' into upstream-develop
# Conflicts:
#	backend/main.go
#	frontend/.env.development
2020-01-28 15:51:09 +08:00
陈景阳
092c1a2617 feature 新增全局环境变量 2020-01-28 15:12:12 +08:00
marvzhang
e3f4bcd0ab updated stats 2020-01-22 11:07:38 +08:00
marvzhang
ef2a4b3531 加入树形结构文件目录 2020-01-15 17:44:11 +08:00
marvzhang
c67c1be52a 加入用户设置与邮件通知 2020-01-13 19:56:13 +08:00
marvzhang
877289e382 fixed https://github.com/crawlab-team/crawlab/issues/423 2020-01-06 12:35:17 +08:00
marvzhang
7835de2641 爬虫详情显示定时任务 2020-01-03 17:20:24 +08:00
marvzhang
33fbf96efb 优化代码 2020-01-03 11:12:46 +08:00
marvzhang
98cc4646a3 优化依赖安装 2020-01-03 10:54:20 +08:00
marvzhang
53c77eb6e9 加入卸载依赖逻辑 2020-01-02 17:38:39 +08:00
marvzhang
836dc12703 加入RPC机制,完成部分依赖安装逻辑 2020-01-02 15:53:53 +08:00
marvzhang
32b1f31340 加入依赖安装前端 2019-12-31 17:05:15 +08:00
marvzhang
5811242af9 更新依赖安装逻辑 2019-12-31 12:02:47 +08:00
marvzhang
01aea28c9c 添加文件管理功能(后端) 2019-12-25 20:49:43 +08:00
marvzhang
fdcf12f866 优化添加爬虫逻辑 2019-12-25 19:46:09 +08:00
marvzhang
27b167bc06 加入爬虫文件管理后端 API 2019-12-24 09:12:35 +08:00
marvzhang
936adf6f76 加入爬虫文件管理后端 API 2019-12-24 09:11:42 +08:00