Commit Graph

103 Commits

Author SHA1 Message Date
marvzhang
7a75e643ea 加入批量运行爬虫 2020-02-22 19:12:24 +08:00
marvzhang
8c059c912e 加入批量删除爬虫任务 2020-02-22 17:35:51 +08:00
marvzhang
a346b64bdc 加入scrapy spider跳转 2020-02-21 22:28:41 +08:00
marvzhang
d7437c4eb1 加入scrapy pipelines支持 2020-02-21 17:12:57 +08:00
marvzhang
893ede30e2 修复scrapy items问题 2020-02-21 16:46:16 +08:00
marvzhang
d931f9af8e 加入scrapy items.py支持 2020-02-21 15:07:54 +08:00
marvzhang
e3883faf1c 优化爬虫列表页面 2020-02-20 11:52:28 +08:00
marvzhang
010f3ec1fa 加入长任务支持 2020-02-19 17:24:16 +08:00
marvzhang
bb972e98ef 加入添加scrapy爬虫 2020-02-17 14:06:16 +08:00
marvzhang
dc38642dca 加入settings.py同步 2020-02-17 11:15:16 +08:00
marvzhang
25cee2b492 添加Scrapy设置 2020-02-17 10:30:32 +08:00
marvzhang
acdf4d5951 加入scrapy爬虫支持 2020-02-15 18:28:37 +08:00
marvzhang
168e2a8f4c fixed log refresh issue 2020-02-13 14:53:47 +08:00
marvzhang
7c4ddd2824 优化日志,错误标记 2020-02-13 11:15:51 +08:00
marvzhang
af689b916a optimized project 2020-02-02 16:19:45 +08:00
marvzhang
2243f4d700 optimized project 2020-02-02 14:14:59 +08:00
marvzhang
9d5d0253a8 加入项目管理 2020-02-02 12:29:28 +08:00
marvzhang
83af0786e0 加入教程数据统计 2020-02-01 18:00:33 +08:00
Marvin Zhang
1075506f66 Merge pull request #495 from wo10378931/develop
Develop
2020-02-01 13:52:01 +08:00
marvzhang
51b0e83e9a 修复删除后获取所有爬虫的bug 2020-01-30 11:13:39 +08:00
陈景阳
fcfaf8ba77 Merge remote-tracking branch 'upstream/develop' into upstream-develop
# Conflicts:
#	backend/main.go
#	frontend/.env.development
2020-01-28 15:51:09 +08:00
陈景阳
123e3835d2 feature 新增全局环境变量 2020-01-28 15:12:33 +08:00
marvzhang
1317f8d618 fixed 版本无法显示问题 2020-01-28 09:52:57 +08:00
marvzhang
ce82377dad 调整在线编辑文件 2020-01-15 20:10:51 +08:00
marvzhang
ef2a4b3531 加入树形结构文件目录 2020-01-15 17:44:11 +08:00
marvzhang
c67c1be52a 加入用户设置与邮件通知 2020-01-13 19:56:13 +08:00
陈景阳
e8a119d00d fix 控制台大量告警 2020-01-07 01:54:49 +08:00
marvzhang
fafdccecf7 定时任务优化: 加入启用/禁用 2020-01-06 12:35:56 +08:00
marvzhang
7835de2641 爬虫详情显示定时任务 2020-01-03 17:20:24 +08:00
marvzhang
5811242af9 更新依赖安装逻辑 2019-12-31 12:02:47 +08:00
marvzhang
3e2d762cbd fixed https://github.com/crawlab-team/crawlab/issues/341 2019-12-26 13:04:49 +08:00
marvzhang
971c80239f 尝试加入重命名 2019-12-25 21:07:56 +08:00
marvzhang
7f771a2103 添加文件管理功能 2019-12-25 20:49:27 +08:00
marvzhang
7d5b313a0b 优化爬虫添加逻辑 2019-12-25 19:46:35 +08:00
marvzhang
c5b0011dab 加入添加用户功能 2019-12-20 13:10:46 +08:00
marvzhang
ed7f933aee fixed https://github.com/crawlab-team/crawlab/issues/346 2019-12-20 12:45:37 +08:00
marvzhang
26227dd0dc 修复定时任务不一致问题 2019-12-12 13:13:42 +08:00
陈景阳
f9f04093d9 完成批量删除Task任务列表 2019-12-08 10:58:02 +08:00
陈景阳
18f34f1703 Feature 新增定时任务可暂停/运行 2019-12-07 14:03:23 +08:00
陈景阳
d5cfb04560 添加注释 2019-12-07 10:58:09 +08:00
marvzhang
c5fad12854 优化 https://github.com/crawlab-team/crawlab/issues/185 2019-12-04 16:33:02 +08:00
marvzhang
98cbccb81e 加入Spiderfile模版 2019-12-03 13:37:41 +08:00
marvzhang
c3bc20127d 更新可配置爬虫 2019-12-02 22:35:45 +08:00
marvzhang
eb7d8b8fa3 完成可配置爬虫设置部分 2019-12-02 13:29:00 +08:00
marvzhang
d7cbaac94f 修复bug 2019-11-29 13:00:33 +08:00
marvzhang
5785e3d890 添加可配置爬虫翻译 2019-11-28 22:38:49 +08:00
marvzhang
ee0ad4cede 加入添加可配置爬虫 2019-11-28 22:19:49 +08:00
marvzhang
d65e37517e 优化可配置爬虫前端界面 2019-11-28 21:36:17 +08:00
陈景阳
bdeaa587f9 爬虫列表 2019-09-26 20:52:45 +08:00
陈景阳
82999225de fix 无法获取task的错误 2019-09-25 15:11:27 +08:00