211 Commits

Author	SHA1	Message	Date
marvzhang	f0382ab768	暂时关闭java	2020-03-05 11:01:58 +08:00
marvzhang	a3326da0f5	加入hostname注册	2020-03-05 08:56:01 +08:00
marvzhang	9e24d22ee1	updated install-java.sh	2020-03-05 08:09:12 +08:00
marvzhang	89d1846510	added java env	2020-03-04 10:36:58 +08:00
marvzhang	2712d7207d	加入帮助文档	2020-03-01 20:55:52 +08:00
marvzhang	a24eeab68d	fixed https://github.com/crawlab-team/crawlab/issues/577	2020-02-24 09:48:23 +08:00
marvzhang	562ae39eb2	加入复制爬虫	2020-02-24 09:12:03 +08:00
marvzhang	57f1edc207	updated dockerpush.yml	2020-02-23 09:19:18 +08:00
marvzhang	8c059c912e	加入批量删除爬虫任务	2020-02-22 17:35:51 +08:00
marvzhang	4365d14ece	暂时停用自动检测Scrapy项目功能	2020-02-22 12:48:15 +08:00
marvzhang	a346b64bdc	加入scrapy spider跳转	2020-02-21 22:28:41 +08:00
marvzhang	d7437c4eb1	加入scrapy pipelines支持	2020-02-21 17:12:57 +08:00
marvzhang	d931f9af8e	加入scrapy items.py支持	2020-02-21 15:07:54 +08:00
marvzhang	c350d7d3d9	加入添加scrapy项目	2020-02-20 17:33:45 +08:00
marvzhang	e3883faf1c	优化爬虫列表页面	2020-02-20 11:52:28 +08:00
marvzhang	e4c012cf2f	加入版本检测	2020-02-19 13:16:46 +08:00
marvzhang	51a01e1f32	fixed ssh-keygen issue	2020-02-18 15:20:57 +08:00
marvzhang	06f1d6a8ac	fixed unable to update is_scrapy issue	2020-02-18 14:57:57 +08:00
marvzhang	5c65ed4da1	更改ssh逻辑	2020-02-18 13:42:31 +08:00
marvzhang	0cb2e8134c	加入Git同步	2020-02-18 12:15:40 +08:00
marvzhang	f83a041cd1	加入git同步	2020-02-17 18:12:59 +08:00
marvzhang	bb972e98ef	加入添加scrapy爬虫	2020-02-17 14:06:16 +08:00
marvzhang	25b4c7d272	完成scrapy设置	2020-02-17 11:52:26 +08:00
marvzhang	dc38642dca	加入settings.py同步	2020-02-17 11:15:16 +08:00
marvzhang	cdaf3363c8	添加Scrapy设置后端	2020-02-17 10:31:59 +08:00
marvzhang	69e4c23115	更新scrapy参数	2020-02-16 10:38:41 +08:00
marvzhang	01fefbee88	加入scrapy日志选择	2020-02-15 21:25:21 +08:00
marvzhang	acdf4d5951	加入scrapy爬虫支持	2020-02-15 18:28:37 +08:00
marvzhang	1c7c20c11c	优化爬虫执行逻辑	2020-02-11 15:37:06 +08:00
marvzhang	6b32709a39	兼容Node.js爬虫	2020-02-10 13:23:34 +08:00
marvzhang	a448c0f06b	fixed unable to sync spiders to nodes error	2020-02-03 16:08:43 +08:00
marvzhang	de2d230e1a	changed dir	2020-02-03 11:58:05 +08:00
marvzhang	be3235cefa	added demo for general spiders	2020-02-03 10:30:04 +08:00
marvzhang	cb6a8f79d8	added demo spiders	2020-02-03 09:21:41 +08:00
marvzhang	5740774ccc	添加demo爬虫	2020-02-02 22:56:11 +08:00
marvzhang	633740f1c2	fixed https://github.com/crawlab-team/crawlab/issues/485	2020-02-01 19:18:30 +08:00
陈景阳	100e7631fb	fix 启动报错的问题	2020-02-01 12:53:44 +08:00
陈景阳	81edf9ab72	fix 无法及时同步爬虫的问题	2020-01-28 15:43:57 +08:00
陈景阳	092c1a2617	feature 新增全局环境变量	2020-01-28 15:12:12 +08:00
marvzhang	39c6df11c1	调整在线编辑文件	2020-01-15 20:10:43 +08:00
marvzhang	ef2a4b3531	加入树形结构文件目录	2020-01-15 17:44:11 +08:00
marvzhang	b70949cc87	加入消息通知类型选择	2020-01-15 14:39:51 +08:00
marvzhang	1fde42b932	将发送消息通知调整为异步	2020-01-15 13:51:12 +08:00
marvzhang	9c24126223	完成钉钉机器人消息通知	2020-01-15 13:04:59 +08:00
marvzhang	32bfb63d8f	完成钉钉机器人消息通知	2020-01-15 13:03:43 +08:00
marvzhang	9e61e4c149	added vendor	2020-01-15 10:31:58 +08:00
marvzhang	8069000956	added dingtalk	2020-01-14 20:03:04 +08:00
marvzhang	c227cdeaba	默认为不触发通知	2020-01-14 15:42:51 +08:00
marvzhang	875332dba7	更新邮件通知	2020-01-14 11:49:42 +08:00
marvzhang	c67c1be52a	加入用户设置与邮件通知	2020-01-13 19:56:13 +08:00