Commit Graph

223 Commits

Author SHA1 Message Date
marvzhang
96ae068528 加入php安装 2020-03-10 16:42:40 +08:00
marvzhang
689d44bbe7 修复安装语言问题 2020-03-10 16:20:04 +08:00
marvzhang
987d2224d9 重构安装卸载依赖RPC逻辑 2020-03-10 14:54:28 +08:00
marvzhang
5ae77a9d30 重构获取已安装依赖列表RPC逻辑 2020-03-10 13:48:08 +08:00
marvzhang
e5b4ac6310 重构RPC逻辑 2020-03-10 12:08:26 +08:00
marvzhang
ab33640a50 adjust params 2020-03-08 18:38:09 +08:00
marvzhang
fe97b813e8 优化RPC逻辑 2020-03-08 17:50:26 +08:00
marvzhang
cc81b80397 修复节点名称 2020-03-08 17:10:13 +08:00
marvzhang
b422be8c3d try to fix installation error 2020-03-08 15:30:12 +08:00
marvzhang
96a8ad51b2 解决无法读取工作节点语言问题 2020-03-07 14:08:14 +08:00
marvzhang
963b464b5c 尝试修复工作节点未找到安装语言问题 2020-03-07 12:15:42 +08:00
marvzhang
0521cd4b63 优化安装界面 2020-03-07 10:28:34 +08:00
marvzhang
f0382ab768 暂时关闭java 2020-03-05 11:01:58 +08:00
marvzhang
a3326da0f5 加入hostname注册 2020-03-05 08:56:01 +08:00
marvzhang
9e24d22ee1 updated install-java.sh 2020-03-05 08:09:12 +08:00
marvzhang
89d1846510 added java env 2020-03-04 10:36:58 +08:00
marvzhang
2712d7207d 加入帮助文档 2020-03-01 20:55:52 +08:00
marvzhang
a24eeab68d fixed https://github.com/crawlab-team/crawlab/issues/577 2020-02-24 09:48:23 +08:00
marvzhang
562ae39eb2 加入复制爬虫 2020-02-24 09:12:03 +08:00
marvzhang
57f1edc207 updated dockerpush.yml 2020-02-23 09:19:18 +08:00
marvzhang
8c059c912e 加入批量删除爬虫任务 2020-02-22 17:35:51 +08:00
marvzhang
4365d14ece 暂时停用自动检测Scrapy项目功能 2020-02-22 12:48:15 +08:00
marvzhang
a346b64bdc 加入scrapy spider跳转 2020-02-21 22:28:41 +08:00
marvzhang
d7437c4eb1 加入scrapy pipelines支持 2020-02-21 17:12:57 +08:00
marvzhang
d931f9af8e 加入scrapy items.py支持 2020-02-21 15:07:54 +08:00
marvzhang
c350d7d3d9 加入添加scrapy项目 2020-02-20 17:33:45 +08:00
marvzhang
e3883faf1c 优化爬虫列表页面 2020-02-20 11:52:28 +08:00
marvzhang
e4c012cf2f 加入版本检测 2020-02-19 13:16:46 +08:00
marvzhang
51a01e1f32 fixed ssh-keygen issue 2020-02-18 15:20:57 +08:00
marvzhang
06f1d6a8ac fixed unable to update is_scrapy issue 2020-02-18 14:57:57 +08:00
marvzhang
5c65ed4da1 更改ssh逻辑 2020-02-18 13:42:31 +08:00
marvzhang
0cb2e8134c 加入Git同步 2020-02-18 12:15:40 +08:00
marvzhang
f83a041cd1 加入git同步 2020-02-17 18:12:59 +08:00
marvzhang
bb972e98ef 加入添加scrapy爬虫 2020-02-17 14:06:16 +08:00
marvzhang
25b4c7d272 完成scrapy设置 2020-02-17 11:52:26 +08:00
marvzhang
dc38642dca 加入settings.py同步 2020-02-17 11:15:16 +08:00
marvzhang
cdaf3363c8 添加Scrapy设置后端 2020-02-17 10:31:59 +08:00
marvzhang
69e4c23115 更新scrapy参数 2020-02-16 10:38:41 +08:00
marvzhang
01fefbee88 加入scrapy日志选择 2020-02-15 21:25:21 +08:00
marvzhang
acdf4d5951 加入scrapy爬虫支持 2020-02-15 18:28:37 +08:00
marvzhang
1c7c20c11c 优化爬虫执行逻辑 2020-02-11 15:37:06 +08:00
marvzhang
6b32709a39 兼容Node.js爬虫 2020-02-10 13:23:34 +08:00
marvzhang
a448c0f06b fixed unable to sync spiders to nodes error 2020-02-03 16:08:43 +08:00
marvzhang
de2d230e1a changed dir 2020-02-03 11:58:05 +08:00
marvzhang
be3235cefa added demo for general spiders 2020-02-03 10:30:04 +08:00
marvzhang
cb6a8f79d8 added demo spiders 2020-02-03 09:21:41 +08:00
marvzhang
5740774ccc 添加demo爬虫 2020-02-02 22:56:11 +08:00
marvzhang
633740f1c2 fixed https://github.com/crawlab-team/crawlab/issues/485 2020-02-01 19:18:30 +08:00
陈景阳
100e7631fb fix 启动报错的问题 2020-02-01 12:53:44 +08:00
陈景阳
81edf9ab72 fix 无法及时同步爬虫的问题 2020-01-28 15:43:57 +08:00