Commit Graph

18 Commits

Author SHA1 Message Date
marvzhang
c86a6dda9c 修复可配置爬虫无法解析 "//" 打头的URL 2020-01-30 17:36:38 +08:00
marvzhang
525ffd78b7 updated version 2020-01-15 20:40:02 +08:00
marvzhang
3ef794f7a2 将可配置爬虫stages调整为列表 2019-12-13 12:55:53 +08:00
marvzhang
be4a5f6667 优先调整xpath顺序 2019-12-04 13:57:27 +08:00
marvzhang
82c6b80063 更新Spiderfile模版 2019-12-03 14:25:54 +08:00
marvzhang
589190d674 加入Spiderfile模版 2019-12-03 13:37:41 +08:00
marvzhang
9c5c0bd270 更新可配置爬虫 2019-12-03 12:14:38 +08:00
marvzhang
af680d576a 更新可配置爬虫 2019-12-02 22:35:45 +08:00
marvzhang
fd27949a40 加入依赖模块 2019-12-02 17:46:57 +08:00
marvzhang
a1bfe00eee 准备可配置爬虫自定义设置变量 2019-11-29 13:42:50 +08:00
marvzhang
e2e61c621e 加入环境变量 2019-11-25 22:07:20 +08:00
marvzhang
825962f8ba 加入储存逻辑 2019-11-25 17:52:19 +08:00
marvzhang
2e5468e4c1 refactor code 2019-11-25 16:45:55 +08:00
marvzhang
b8592b89ce 更新可配置爬虫,修复一些问题 2019-11-24 19:45:21 +08:00
marvzhang
6a07afa279 更新可配置爬虫,修复一些问题 2019-11-24 18:51:32 +08:00
marvzhang
38d103da39 加入可配置爬虫 2019-11-24 17:57:12 +08:00
marvzhang
b51fa81b79 code cleanup 2019-11-23 18:16:24 +08:00
marvzhang
b5c3ca9c32 准备可配置爬虫 2019-11-23 18:13:47 +08:00