Commit Graph

101 Commits

Author SHA1 Message Date
marvzhang
2e6b6e4e70 加入批量删除爬虫任务 2020-02-22 17:35:51 +08:00
marvzhang
17bdbaf8dd 优化爬虫列表页面 2020-02-20 11:52:28 +08:00
marvzhang
2ce289c8f3 加入Git同步 2020-02-18 12:15:40 +08:00
marvzhang
3bb1fe2a74 加入git同步 2020-02-17 18:12:59 +08:00
marvzhang
fc4d92c4d6 更新scrapy参数 2020-02-16 10:38:41 +08:00
marvzhang
3b8702ed58 加入scrapy日志选择 2020-02-15 21:25:21 +08:00
marvzhang
d46f43b05b 加入scrapy爬虫支持 2020-02-15 18:28:37 +08:00
marvzhang
8aed6c1de7 fixed https://github.com/crawlab-team/crawlab/issues/524 2020-02-09 09:02:13 +08:00
marvzhang
98e5ead285 添加demo爬虫 2020-02-02 22:56:11 +08:00
marvzhang
0b22e55e93 finish up project 2020-02-02 13:29:56 +08:00
marvzhang
075a899c2f 加入项目管理 2020-02-02 12:29:28 +08:00
Marvin Zhang
fa01b0fdfa Merge pull request #495 from wo10378931/develop
Develop
2020-02-01 13:52:01 +08:00
marvzhang
680cc4eabc fixed https://github.com/crawlab-team/crawlab/issues/465 2020-01-29 09:24:43 +08:00
陈景阳
b139c7fe6c feature 新增全局环境变量 2020-01-28 15:12:12 +08:00
marvzhang
172dfe6c7e 调整在线编辑文件 2020-01-15 20:10:43 +08:00
marvzhang
ae2ff69b45 加入树形结构文件目录 2020-01-15 17:44:11 +08:00
marvzhang
9195606e2d 加入消息通知类型选择 2020-01-15 14:39:51 +08:00
marvzhang
f5b22cba7a 将发送消息通知调整为异步 2020-01-15 13:51:12 +08:00
marvzhang
eab6b39603 完成钉钉机器人消息通知 2020-01-15 13:03:43 +08:00
marvzhang
597b9c4ee6 updated setting 2020-01-14 17:29:19 +08:00
marvzhang
659874a4ee 加入用户设置与邮件通知 2020-01-13 19:56:13 +08:00
marvzhang
2c3f440c8e 加入爬虫列表排序 2020-01-06 13:18:29 +08:00
marvzhang
a74b949d8d fixed https://github.com/crawlab-team/crawlab/issues/423 2020-01-06 12:35:17 +08:00
marvzhang
44c0b050f7 爬虫详情显示定时任务 2020-01-03 17:20:24 +08:00
marvzhang
2f47a929d0 解决上传爬虫报错问题 2019-12-27 17:24:23 +08:00
yaziming
6dced83896 fix(backend):
临时解决修复偶发mongo多节点信息的问题,后续需重构
2019-12-26 11:26:41 +08:00
marvzhang
44c9bde96f fixed https://github.com/crawlab-team/crawlab/issues/373 2019-12-19 10:42:20 +08:00
Marvin Zhang
32c07c5270 Merge pull request #370 from wo10378931/develop
Develop
2019-12-17 10:09:37 +08:00
marvzhang
3ef794f7a2 将可配置爬虫stages调整为列表 2019-12-13 12:55:53 +08:00
陈景阳
c64ea5c250 优化代码,添加注释 2019-12-12 20:52:09 +08:00
marvzhang
0cf745767c 修复定时任务不一致问题 2019-12-12 13:13:42 +08:00
陈景阳
b4c160fe22 完成可能重复注册节点的问题 2019-12-09 10:28:48 +08:00
陈景阳
0daeb33699 完成批量删除Task任务列表 2019-12-08 10:58:02 +08:00
陈景阳
6e7634d70f Feature 新增定时任务可暂停/运行 2019-12-07 14:02:54 +08:00
陈景阳
6fb831b322 Merge remote-tracking branch 'upstream/develop' into upstream-develop 2019-12-07 10:58:24 +08:00
hantmac
a74fd82b6a - 新增authGroup.DELETE("/tasks_by_status", routes.DeleteTaskByStatus) 支持批量删除指定状态的任务
- TaskListRequestData中增加Status字段,支持根据task状态进行筛选
2019-12-05 15:12:32 +08:00
陈景阳
0c5ae35297 Merge remote-tracking branch 'upstream/develop' into upstream-develop 2019-12-05 07:18:17 +08:00
marvzhang
be4a5f6667 优先调整xpath顺序 2019-12-04 13:57:27 +08:00
marvzhang
82c6b80063 更新Spiderfile模版 2019-12-03 14:25:54 +08:00
marvzhang
589190d674 加入Spiderfile模版 2019-12-03 13:37:41 +08:00
marvzhang
9c5c0bd270 更新可配置爬虫 2019-12-03 12:14:38 +08:00
marvzhang
e14c7fa80e 修复删除可配置爬虫问题 2019-11-28 22:20:20 +08:00
marvzhang
ba4f5fd20c 优化可配置爬虫前端界面 2019-11-28 21:36:17 +08:00
marvzhang
bc81462a80 加入修改可配置POST接口 2019-11-28 16:08:13 +08:00
marvzhang
f06c8eb785 准备前端可配置爬虫数据 2019-11-27 12:42:08 +08:00
marvzhang
2630802e6b Merge remote-tracking branch 'origin/develop' into develop 2019-11-27 12:41:51 +08:00
marvzhang
ded5703b13 准备前端可配置爬虫数据 2019-11-27 12:32:25 +08:00
marvzhang
88118cf894 准备前端可配置爬虫数据 2019-11-27 10:40:37 +08:00
Marvin Zhang
b6fba383d7 Merge pull request #321 from zhangweiii/master
fix Cannot read property length of null when first init
2019-11-27 10:02:21 +08:00
zhangweiii
8c72395ab7 fix Cannot read property length of null when first init 2019-11-27 09:45:16 +08:00