13 Commits

Author	SHA1	Message	Date
Seven2Nine	a7d3ca3bd3	Update spider.py ... 修复“//” 开头的url报错 ValueError('Missing scheme in request url: %s' % self._url)	2020-07-08 11:06:52 +08:00
marvzhang	c86a6dda9c	修复可配置爬虫无法解析 "//" 打头的URL	2020-01-30 17:36:38 +08:00
marvzhang	589190d674	加入Spiderfile模版	2019-12-03 13:37:41 +08:00
marvzhang	9c5c0bd270	更新可配置爬虫	2019-12-03 12:14:38 +08:00
marvzhang	af680d576a	更新可配置爬虫	2019-12-02 22:35:45 +08:00
marvzhang	fd27949a40	加入依赖模块	2019-12-02 17:46:57 +08:00
marvzhang	a1bfe00eee	准备可配置爬虫自定义设置变量	2019-11-29 13:42:50 +08:00
marvzhang	e2e61c621e	加入环境变量	2019-11-25 22:07:20 +08:00
marvzhang	825962f8ba	加入储存逻辑	2019-11-25 17:52:19 +08:00
marvzhang	2e5468e4c1	refactor code	2019-11-25 16:45:55 +08:00
marvzhang	b8592b89ce	更新可配置爬虫，修复一些问题	2019-11-24 19:45:21 +08:00
marvzhang	6a07afa279	更新可配置爬虫，修复一些问题	2019-11-24 18:51:32 +08:00
marvzhang	38d103da39	加入可配置爬虫	2019-11-24 17:57:12 +08:00