mirror of
https://github.com/crawlab-team/crawlab.git
synced 2026-01-21 17:21:09 +01:00
refactor code
This commit is contained in:
@@ -1,35 +1,77 @@
|
|||||||
|
aiohttp==3.5.4
|
||||||
amqp==2.4.2
|
amqp==2.4.2
|
||||||
aniso8601==6.0.0
|
aniso8601==6.0.0
|
||||||
|
Appium-Python-Client==0.40
|
||||||
APScheduler==3.6.0
|
APScheduler==3.6.0
|
||||||
|
asn1crypto==0.24.0
|
||||||
|
async-timeout==3.0.1
|
||||||
attrs==19.1.0
|
attrs==19.1.0
|
||||||
|
Automat==0.7.0
|
||||||
Babel==2.6.0
|
Babel==2.6.0
|
||||||
|
beautifulsoup4==4.7.1
|
||||||
billiard==3.6.0.0
|
billiard==3.6.0.0
|
||||||
|
bs4==0.0.1
|
||||||
|
cachetools==3.1.0
|
||||||
celery==4.3.0
|
celery==4.3.0
|
||||||
certifi==2019.3.9
|
certifi==2019.3.9
|
||||||
|
cffi==1.12.3
|
||||||
chardet==3.0.4
|
chardet==3.0.4
|
||||||
Click==7.0
|
Click==7.0
|
||||||
coloredlogs==10.0
|
coloredlogs==10.0
|
||||||
|
constantly==15.1.0
|
||||||
|
cryptography==2.6.1
|
||||||
|
cssselect==1.0.3
|
||||||
Flask==1.0.2
|
Flask==1.0.2
|
||||||
|
Flask-APScheduler==1.11.0
|
||||||
Flask-Cors==3.0.7
|
Flask-Cors==3.0.7
|
||||||
Flask-RESTful==0.3.7
|
Flask-RESTful==0.3.7
|
||||||
flask-restplus==0.12.1
|
flask-restplus==0.12.1
|
||||||
flower==0.9.3
|
flower==0.9.3
|
||||||
|
gunicorn==19.9.0
|
||||||
|
html5lib==1.0.1
|
||||||
humanfriendly==4.18
|
humanfriendly==4.18
|
||||||
|
hyperlink==19.0.0
|
||||||
idna==2.8
|
idna==2.8
|
||||||
|
idna-ssl==1.1.0
|
||||||
|
incremental==17.5.0
|
||||||
itsdangerous==1.1.0
|
itsdangerous==1.1.0
|
||||||
Jinja2==2.10
|
Jinja2==2.10
|
||||||
|
jsonpickle==1.1
|
||||||
jsonschema==3.0.1
|
jsonschema==3.0.1
|
||||||
kombu==4.5.0
|
kombu==4.5.0
|
||||||
|
lxml==4.3.3
|
||||||
MarkupSafe==1.1.1
|
MarkupSafe==1.1.1
|
||||||
mongoengine==0.17.0
|
mongoengine==0.17.0
|
||||||
|
multidict==4.5.2
|
||||||
|
parsel==1.5.1
|
||||||
|
pyasn1==0.4.5
|
||||||
|
pyasn1-modules==0.2.5
|
||||||
|
pycparser==2.19
|
||||||
|
PyDispatcher==2.0.5
|
||||||
|
PyHamcrest==1.9.0
|
||||||
pymongo==3.7.2
|
pymongo==3.7.2
|
||||||
|
pyOpenSSL==19.0.0
|
||||||
pyrsistent==0.14.11
|
pyrsistent==0.14.11
|
||||||
|
python-dateutil==2.8.0
|
||||||
pytz==2018.9
|
pytz==2018.9
|
||||||
|
queuelib==1.5.0
|
||||||
redis==3.2.1
|
redis==3.2.1
|
||||||
|
redisbeat==1.1.4
|
||||||
|
reppy==0.4.12
|
||||||
requests==2.21.0
|
requests==2.21.0
|
||||||
|
Scrapy==1.6.0
|
||||||
|
selenium==3.141.0
|
||||||
|
service-identity==18.1.0
|
||||||
six==1.12.0
|
six==1.12.0
|
||||||
|
soupsieve==1.9.1
|
||||||
tornado==5.1.1
|
tornado==5.1.1
|
||||||
|
Twisted==19.2.0
|
||||||
|
typing-extensions==3.7.2
|
||||||
tzlocal==1.5.1
|
tzlocal==1.5.1
|
||||||
urllib3==1.24.1
|
urllib3==1.24.1
|
||||||
vine==1.3.0
|
vine==1.3.0
|
||||||
|
w3lib==1.20.0
|
||||||
|
webencodings==0.5.1
|
||||||
Werkzeug==0.15.2
|
Werkzeug==0.15.2
|
||||||
|
yarl==1.3.0
|
||||||
|
zope.interface==4.6.0
|
||||||
|
|||||||
@@ -1,2 +0,0 @@
|
|||||||
# App
|
|
||||||
|
|
||||||
@@ -1,6 +0,0 @@
|
|||||||
# 部署
|
|
||||||
|
|
||||||
所有爬虫在运行前需要被部署当相应当节点中。
|
|
||||||
|
|
||||||
部署时,爬虫会被打包到相应的目录中,方便环境隔离,开发环境的爬虫和生产环境的爬虫需要打包部署来实现隔离。
|
|
||||||
|
|
||||||
@@ -1,2 +0,0 @@
|
|||||||
# Examples
|
|
||||||
|
|
||||||
@@ -1,22 +0,0 @@
|
|||||||
# 安装
|
|
||||||
|
|
||||||
最快安装Crawlab的方式是克隆一份代码到本地
|
|
||||||
|
|
||||||
```bash
|
|
||||||
git clone https://github.com/tikazyq/crawlab
|
|
||||||
```
|
|
||||||
|
|
||||||
安装类库
|
|
||||||
|
|
||||||
```bash
|
|
||||||
# 安装后台类库
|
|
||||||
pip install -r requirements.txt
|
|
||||||
```
|
|
||||||
|
|
||||||
```bash
|
|
||||||
# 安装前台类库
|
|
||||||
cd frontend
|
|
||||||
npm install
|
|
||||||
```
|
|
||||||
|
|
||||||
|
|
||||||
@@ -1,436 +0,0 @@
|
|||||||
|
|
||||||
<!DOCTYPE HTML>
|
|
||||||
<html lang="" >
|
|
||||||
<head>
|
|
||||||
<meta charset="UTF-8">
|
|
||||||
<meta content="text/html; charset=utf-8" http-equiv="Content-Type">
|
|
||||||
<title>App · GitBook</title>
|
|
||||||
<meta http-equiv="X-UA-Compatible" content="IE=edge" />
|
|
||||||
<meta name="description" content="">
|
|
||||||
<meta name="generator" content="GitBook 3.2.3">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<link rel="stylesheet" href="../gitbook/style.css">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<link rel="stylesheet" href="../gitbook/gitbook-plugin-highlight/website.css">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<link rel="stylesheet" href="../gitbook/gitbook-plugin-search/search.css">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<link rel="stylesheet" href="../gitbook/gitbook-plugin-fontsettings/website.css">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<meta name="HandheldFriendly" content="true"/>
|
|
||||||
<meta name="viewport" content="width=device-width, initial-scale=1, user-scalable=no">
|
|
||||||
<meta name="apple-mobile-web-app-capable" content="yes">
|
|
||||||
<meta name="apple-mobile-web-app-status-bar-style" content="black">
|
|
||||||
<link rel="apple-touch-icon-precomposed" sizes="152x152" href="../gitbook/images/apple-touch-icon-precomposed-152.png">
|
|
||||||
<link rel="shortcut icon" href="../gitbook/images/favicon.ico" type="image/x-icon">
|
|
||||||
|
|
||||||
|
|
||||||
<link rel="next" href="../Examples/" />
|
|
||||||
|
|
||||||
|
|
||||||
<link rel="prev" href="Celery.html" />
|
|
||||||
|
|
||||||
|
|
||||||
</head>
|
|
||||||
<body>
|
|
||||||
|
|
||||||
<div class="book">
|
|
||||||
<div class="book-summary">
|
|
||||||
|
|
||||||
|
|
||||||
<div id="book-search-input" role="search">
|
|
||||||
<input type="text" placeholder="Type to search" />
|
|
||||||
</div>
|
|
||||||
|
|
||||||
|
|
||||||
<nav role="navigation">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<ul class="summary">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.1" data-path="../">
|
|
||||||
|
|
||||||
<a href="../">
|
|
||||||
|
|
||||||
|
|
||||||
简介
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.2" data-path="../QuickStart/">
|
|
||||||
|
|
||||||
<a href="../QuickStart/">
|
|
||||||
|
|
||||||
|
|
||||||
快速开始
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<ul class="articles">
|
|
||||||
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.2.1" data-path="../QuickStart/Installation.html">
|
|
||||||
|
|
||||||
<a href="../QuickStart/Installation.html">
|
|
||||||
|
|
||||||
|
|
||||||
安装
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.2.2" data-path="../QuickStart/Run.html">
|
|
||||||
|
|
||||||
<a href="../QuickStart/Run.html">
|
|
||||||
|
|
||||||
|
|
||||||
运行
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
|
|
||||||
</ul>
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.3" data-path="../Concept/">
|
|
||||||
|
|
||||||
<a href="../Concept/">
|
|
||||||
|
|
||||||
|
|
||||||
概念
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<ul class="articles">
|
|
||||||
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.3.1" data-path="../Concept/Node.html">
|
|
||||||
|
|
||||||
<a href="../Concept/Node.html">
|
|
||||||
|
|
||||||
|
|
||||||
节点
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.3.2" data-path="../Concept/Spider.html">
|
|
||||||
|
|
||||||
<a href="../Concept/Spider.html">
|
|
||||||
|
|
||||||
|
|
||||||
爬虫
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.3.3" data-path="../Concept/Task.html">
|
|
||||||
|
|
||||||
<a href="../Concept/Task.html">
|
|
||||||
|
|
||||||
|
|
||||||
任务
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.3.4" data-path="../Concept/Deploy.html">
|
|
||||||
|
|
||||||
<a href="../Concept/Deploy.html">
|
|
||||||
|
|
||||||
|
|
||||||
部署
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
|
|
||||||
</ul>
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.4" data-path="./">
|
|
||||||
|
|
||||||
<a href="./">
|
|
||||||
|
|
||||||
|
|
||||||
架构
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<ul class="articles">
|
|
||||||
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.4.1" data-path="Celery.html">
|
|
||||||
|
|
||||||
<a href="Celery.html">
|
|
||||||
|
|
||||||
|
|
||||||
Celery
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter active" data-level="1.4.2" data-path="App.html">
|
|
||||||
|
|
||||||
<a href="App.html">
|
|
||||||
|
|
||||||
|
|
||||||
App
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
|
|
||||||
</ul>
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.5" data-path="../Examples/">
|
|
||||||
|
|
||||||
<a href="../Examples/">
|
|
||||||
|
|
||||||
|
|
||||||
Examples
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<ul class="articles">
|
|
||||||
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.5.1" data-path="../Examples/">
|
|
||||||
|
|
||||||
<a href="../Examples/">
|
|
||||||
|
|
||||||
|
|
||||||
与Scrapy集成
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.5.2" data-path="../Examples/">
|
|
||||||
|
|
||||||
<a href="../Examples/">
|
|
||||||
|
|
||||||
|
|
||||||
与Puppeteer集成
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
|
|
||||||
</ul>
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<li class="divider"></li>
|
|
||||||
|
|
||||||
<li>
|
|
||||||
<a href="https://www.gitbook.com" target="blank" class="gitbook-link">
|
|
||||||
Published with GitBook
|
|
||||||
</a>
|
|
||||||
</li>
|
|
||||||
</ul>
|
|
||||||
|
|
||||||
|
|
||||||
</nav>
|
|
||||||
|
|
||||||
|
|
||||||
</div>
|
|
||||||
|
|
||||||
<div class="book-body">
|
|
||||||
|
|
||||||
<div class="body-inner">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<div class="book-header" role="navigation">
|
|
||||||
|
|
||||||
|
|
||||||
<!-- Title -->
|
|
||||||
<h1>
|
|
||||||
<i class="fa fa-circle-o-notch fa-spin"></i>
|
|
||||||
<a href=".." >App</a>
|
|
||||||
</h1>
|
|
||||||
</div>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<div class="page-wrapper" tabindex="-1" role="main">
|
|
||||||
<div class="page-inner">
|
|
||||||
|
|
||||||
<div id="book-search-results">
|
|
||||||
<div class="search-noresults">
|
|
||||||
|
|
||||||
<section class="normal markdown-section">
|
|
||||||
|
|
||||||
<h1 id="app">App</h1>
|
|
||||||
|
|
||||||
|
|
||||||
</section>
|
|
||||||
|
|
||||||
</div>
|
|
||||||
<div class="search-results">
|
|
||||||
<div class="has-results">
|
|
||||||
|
|
||||||
<h1 class="search-results-title"><span class='search-results-count'></span> results matching "<span class='search-query'></span>"</h1>
|
|
||||||
<ul class="search-results-list"></ul>
|
|
||||||
|
|
||||||
</div>
|
|
||||||
<div class="no-results">
|
|
||||||
|
|
||||||
<h1 class="search-results-title">No results matching "<span class='search-query'></span>"</h1>
|
|
||||||
|
|
||||||
</div>
|
|
||||||
</div>
|
|
||||||
</div>
|
|
||||||
|
|
||||||
</div>
|
|
||||||
</div>
|
|
||||||
|
|
||||||
</div>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<a href="Celery.html" class="navigation navigation-prev " aria-label="Previous page: Celery">
|
|
||||||
<i class="fa fa-angle-left"></i>
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
<a href="../Examples/" class="navigation navigation-next " aria-label="Next page: Examples">
|
|
||||||
<i class="fa fa-angle-right"></i>
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</div>
|
|
||||||
|
|
||||||
<script>
|
|
||||||
var gitbook = gitbook || [];
|
|
||||||
gitbook.push(function() {
|
|
||||||
gitbook.page.hasChanged({"page":{"title":"App","level":"1.4.2","depth":2,"next":{"title":"Examples","level":"1.5","depth":1,"path":"Examples/README.md","ref":"Examples/README.md","articles":[{"title":"与Scrapy集成","level":"1.5.1","depth":2,"path":"Examples/README.md","ref":"Examples/README.md","articles":[]},{"title":"与Puppeteer集成","level":"1.5.2","depth":2,"path":"Examples/README.md","ref":"Examples/README.md","articles":[]}]},"previous":{"title":"Celery","level":"1.4.1","depth":2,"path":"Architecture/Celery.md","ref":"Architecture/Celery.md","articles":[]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":[],"pluginsConfig":{"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"Architecture/App.md","mtime":"2019-03-28T11:49:43.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-03-28T12:07:05.349Z"},"basePath":"..","book":{"language":""}});
|
|
||||||
});
|
|
||||||
</script>
|
|
||||||
</div>
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook.js"></script>
|
|
||||||
<script src="../gitbook/theme.js"></script>
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-search/search-engine.js"></script>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-search/search.js"></script>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-lunr/lunr.min.js"></script>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-lunr/search-lunr.js"></script>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-sharing/buttons.js"></script>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-fontsettings/fontsettings.js"></script>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</body>
|
|
||||||
</html>
|
|
||||||
|
|
||||||
@@ -397,7 +397,7 @@
|
|||||||
<script>
|
<script>
|
||||||
var gitbook = gitbook || [];
|
var gitbook = gitbook || [];
|
||||||
gitbook.push(function() {
|
gitbook.push(function() {
|
||||||
gitbook.page.hasChanged({"page":{"title":"App","level":"1.4.2","depth":2,"next":{"title":"Examples","level":"1.5","depth":1,"path":"Examples/README.md","ref":"Examples/README.md","articles":[{"title":"与Scrapy集成","level":"1.5.1","depth":2,"path":"Examples/README.md","ref":"Examples/README.md","articles":[]},{"title":"与Puppeteer集成","level":"1.5.2","depth":2,"path":"Examples/README.md","ref":"Examples/README.md","articles":[]}]},"previous":{"title":"Celery","level":"1.4.1","depth":2,"path":"Architecture/Celery.md","ref":"Architecture/Celery.md","articles":[]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":[],"pluginsConfig":{"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"Architecture/App.md","mtime":"2019-03-28T11:49:43.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-03-28T12:07:05.349Z"},"basePath":"..","book":{"language":""}});
|
gitbook.page.hasChanged({"page":{"title":"App","level":"1.4.2","depth":2,"next":{"title":"Examples","level":"1.5","depth":1,"path":"Examples/README.md","ref":"Examples/README.md","articles":[{"title":"与Scrapy集成","level":"1.5.1","depth":2,"path":"Examples/README.md","ref":"Examples/README.md","articles":[]},{"title":"与Puppeteer集成","level":"1.5.2","depth":2,"path":"Examples/README.md","ref":"Examples/README.md","articles":[]}]},"previous":{"title":"Celery","level":"1.4.1","depth":2,"path":"Architecture/Celery.md","ref":"Architecture/Celery.md","articles":[]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":["livereload"],"pluginsConfig":{"livereload":{},"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"Architecture/App.md","mtime":"2019-03-28T11:49:43.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-05-16T11:37:08.921Z"},"basePath":"..","book":{"language":""}});
|
||||||
});
|
});
|
||||||
</script>
|
</script>
|
||||||
</div>
|
</div>
|
||||||
@@ -407,6 +407,10 @@
|
|||||||
<script src="../gitbook/theme.js"></script>
|
<script src="../gitbook/theme.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
<script src="../gitbook/gitbook-plugin-livereload/plugin.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-search/search-engine.js"></script>
|
<script src="../gitbook/gitbook-plugin-search/search-engine.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
|||||||
@@ -397,7 +397,7 @@
|
|||||||
<script>
|
<script>
|
||||||
var gitbook = gitbook || [];
|
var gitbook = gitbook || [];
|
||||||
gitbook.push(function() {
|
gitbook.push(function() {
|
||||||
gitbook.page.hasChanged({"page":{"title":"Celery","level":"1.4.1","depth":2,"next":{"title":"App","level":"1.4.2","depth":2,"path":"Architecture/App.md","ref":"Architecture/App.md","articles":[]},"previous":{"title":"架构","level":"1.4","depth":1,"path":"Architecture/README.md","ref":"Architecture/README.md","articles":[{"title":"Celery","level":"1.4.1","depth":2,"path":"Architecture/Celery.md","ref":"Architecture/Celery.md","articles":[]},{"title":"App","level":"1.4.2","depth":2,"path":"Architecture/App.md","ref":"Architecture/App.md","articles":[]}]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":[],"pluginsConfig":{"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"Architecture/Celery.md","mtime":"2019-03-28T11:49:43.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-03-28T12:07:05.349Z"},"basePath":"..","book":{"language":""}});
|
gitbook.page.hasChanged({"page":{"title":"Celery","level":"1.4.1","depth":2,"next":{"title":"App","level":"1.4.2","depth":2,"path":"Architecture/App.md","ref":"Architecture/App.md","articles":[]},"previous":{"title":"架构","level":"1.4","depth":1,"path":"Architecture/README.md","ref":"Architecture/README.md","articles":[{"title":"Celery","level":"1.4.1","depth":2,"path":"Architecture/Celery.md","ref":"Architecture/Celery.md","articles":[]},{"title":"App","level":"1.4.2","depth":2,"path":"Architecture/App.md","ref":"Architecture/App.md","articles":[]}]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":["livereload"],"pluginsConfig":{"livereload":{},"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"Architecture/Celery.md","mtime":"2019-03-28T11:49:43.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-05-16T11:37:08.921Z"},"basePath":"..","book":{"language":""}});
|
||||||
});
|
});
|
||||||
</script>
|
</script>
|
||||||
</div>
|
</div>
|
||||||
@@ -407,6 +407,10 @@
|
|||||||
<script src="../gitbook/theme.js"></script>
|
<script src="../gitbook/theme.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
<script src="../gitbook/gitbook-plugin-livereload/plugin.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-search/search-engine.js"></script>
|
<script src="../gitbook/gitbook-plugin-search/search-engine.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
|||||||
@@ -397,7 +397,7 @@
|
|||||||
<script>
|
<script>
|
||||||
var gitbook = gitbook || [];
|
var gitbook = gitbook || [];
|
||||||
gitbook.push(function() {
|
gitbook.push(function() {
|
||||||
gitbook.page.hasChanged({"page":{"title":"架构","level":"1.4","depth":1,"next":{"title":"Celery","level":"1.4.1","depth":2,"path":"Architecture/Celery.md","ref":"Architecture/Celery.md","articles":[]},"previous":{"title":"部署","level":"1.3.4","depth":2,"path":"Concept/Deploy.md","ref":"Concept/Deploy.md","articles":[]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":[],"pluginsConfig":{"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"Architecture/README.md","mtime":"2019-03-28T11:41:28.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-03-28T12:07:05.349Z"},"basePath":"..","book":{"language":""}});
|
gitbook.page.hasChanged({"page":{"title":"架构","level":"1.4","depth":1,"next":{"title":"Celery","level":"1.4.1","depth":2,"path":"Architecture/Celery.md","ref":"Architecture/Celery.md","articles":[]},"previous":{"title":"部署","level":"1.3.4","depth":2,"path":"Concept/Deploy.md","ref":"Concept/Deploy.md","articles":[]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":["livereload"],"pluginsConfig":{"livereload":{},"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"Architecture/README.md","mtime":"2019-03-28T11:41:28.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-05-16T11:37:08.921Z"},"basePath":"..","book":{"language":""}});
|
||||||
});
|
});
|
||||||
</script>
|
</script>
|
||||||
</div>
|
</div>
|
||||||
@@ -407,6 +407,10 @@
|
|||||||
<script src="../gitbook/theme.js"></script>
|
<script src="../gitbook/theme.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
<script src="../gitbook/gitbook-plugin-livereload/plugin.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-search/search-engine.js"></script>
|
<script src="../gitbook/gitbook-plugin-search/search-engine.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
|||||||
@@ -1,438 +0,0 @@
|
|||||||
|
|
||||||
<!DOCTYPE HTML>
|
|
||||||
<html lang="" >
|
|
||||||
<head>
|
|
||||||
<meta charset="UTF-8">
|
|
||||||
<meta content="text/html; charset=utf-8" http-equiv="Content-Type">
|
|
||||||
<title>部署 · GitBook</title>
|
|
||||||
<meta http-equiv="X-UA-Compatible" content="IE=edge" />
|
|
||||||
<meta name="description" content="">
|
|
||||||
<meta name="generator" content="GitBook 3.2.3">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<link rel="stylesheet" href="../gitbook/style.css">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<link rel="stylesheet" href="../gitbook/gitbook-plugin-highlight/website.css">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<link rel="stylesheet" href="../gitbook/gitbook-plugin-search/search.css">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<link rel="stylesheet" href="../gitbook/gitbook-plugin-fontsettings/website.css">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<meta name="HandheldFriendly" content="true"/>
|
|
||||||
<meta name="viewport" content="width=device-width, initial-scale=1, user-scalable=no">
|
|
||||||
<meta name="apple-mobile-web-app-capable" content="yes">
|
|
||||||
<meta name="apple-mobile-web-app-status-bar-style" content="black">
|
|
||||||
<link rel="apple-touch-icon-precomposed" sizes="152x152" href="../gitbook/images/apple-touch-icon-precomposed-152.png">
|
|
||||||
<link rel="shortcut icon" href="../gitbook/images/favicon.ico" type="image/x-icon">
|
|
||||||
|
|
||||||
|
|
||||||
<link rel="next" href="../Architecture/" />
|
|
||||||
|
|
||||||
|
|
||||||
<link rel="prev" href="Task.html" />
|
|
||||||
|
|
||||||
|
|
||||||
</head>
|
|
||||||
<body>
|
|
||||||
|
|
||||||
<div class="book">
|
|
||||||
<div class="book-summary">
|
|
||||||
|
|
||||||
|
|
||||||
<div id="book-search-input" role="search">
|
|
||||||
<input type="text" placeholder="Type to search" />
|
|
||||||
</div>
|
|
||||||
|
|
||||||
|
|
||||||
<nav role="navigation">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<ul class="summary">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.1" data-path="../">
|
|
||||||
|
|
||||||
<a href="../">
|
|
||||||
|
|
||||||
|
|
||||||
简介
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.2" data-path="../QuickStart/">
|
|
||||||
|
|
||||||
<a href="../QuickStart/">
|
|
||||||
|
|
||||||
|
|
||||||
快速开始
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<ul class="articles">
|
|
||||||
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.2.1" data-path="../QuickStart/Installation.html">
|
|
||||||
|
|
||||||
<a href="../QuickStart/Installation.html">
|
|
||||||
|
|
||||||
|
|
||||||
安装
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.2.2" data-path="../QuickStart/Run.html">
|
|
||||||
|
|
||||||
<a href="../QuickStart/Run.html">
|
|
||||||
|
|
||||||
|
|
||||||
运行
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
|
|
||||||
</ul>
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.3" data-path="./">
|
|
||||||
|
|
||||||
<a href="./">
|
|
||||||
|
|
||||||
|
|
||||||
概念
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<ul class="articles">
|
|
||||||
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.3.1" data-path="Node.html">
|
|
||||||
|
|
||||||
<a href="Node.html">
|
|
||||||
|
|
||||||
|
|
||||||
节点
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.3.2" data-path="Spider.html">
|
|
||||||
|
|
||||||
<a href="Spider.html">
|
|
||||||
|
|
||||||
|
|
||||||
爬虫
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.3.3" data-path="Task.html">
|
|
||||||
|
|
||||||
<a href="Task.html">
|
|
||||||
|
|
||||||
|
|
||||||
任务
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter active" data-level="1.3.4" data-path="Deploy.html">
|
|
||||||
|
|
||||||
<a href="Deploy.html">
|
|
||||||
|
|
||||||
|
|
||||||
部署
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
|
|
||||||
</ul>
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.4" data-path="../Architecture/">
|
|
||||||
|
|
||||||
<a href="../Architecture/">
|
|
||||||
|
|
||||||
|
|
||||||
架构
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<ul class="articles">
|
|
||||||
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.4.1" data-path="../Architecture/Celery.html">
|
|
||||||
|
|
||||||
<a href="../Architecture/Celery.html">
|
|
||||||
|
|
||||||
|
|
||||||
Celery
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.4.2" data-path="../Architecture/App.html">
|
|
||||||
|
|
||||||
<a href="../Architecture/App.html">
|
|
||||||
|
|
||||||
|
|
||||||
App
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
|
|
||||||
</ul>
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.5" data-path="../Examples/">
|
|
||||||
|
|
||||||
<a href="../Examples/">
|
|
||||||
|
|
||||||
|
|
||||||
Examples
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<ul class="articles">
|
|
||||||
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.5.1" data-path="../Examples/">
|
|
||||||
|
|
||||||
<a href="../Examples/">
|
|
||||||
|
|
||||||
|
|
||||||
与Scrapy集成
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.5.2" data-path="../Examples/">
|
|
||||||
|
|
||||||
<a href="../Examples/">
|
|
||||||
|
|
||||||
|
|
||||||
与Puppeteer集成
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
|
|
||||||
</ul>
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<li class="divider"></li>
|
|
||||||
|
|
||||||
<li>
|
|
||||||
<a href="https://www.gitbook.com" target="blank" class="gitbook-link">
|
|
||||||
Published with GitBook
|
|
||||||
</a>
|
|
||||||
</li>
|
|
||||||
</ul>
|
|
||||||
|
|
||||||
|
|
||||||
</nav>
|
|
||||||
|
|
||||||
|
|
||||||
</div>
|
|
||||||
|
|
||||||
<div class="book-body">
|
|
||||||
|
|
||||||
<div class="body-inner">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<div class="book-header" role="navigation">
|
|
||||||
|
|
||||||
|
|
||||||
<!-- Title -->
|
|
||||||
<h1>
|
|
||||||
<i class="fa fa-circle-o-notch fa-spin"></i>
|
|
||||||
<a href=".." >部署</a>
|
|
||||||
</h1>
|
|
||||||
</div>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<div class="page-wrapper" tabindex="-1" role="main">
|
|
||||||
<div class="page-inner">
|
|
||||||
|
|
||||||
<div id="book-search-results">
|
|
||||||
<div class="search-noresults">
|
|
||||||
|
|
||||||
<section class="normal markdown-section">
|
|
||||||
|
|
||||||
<h1 id="部署">部署</h1>
|
|
||||||
<p>所有爬虫在运行前需要被部署当相应当节点中。</p>
|
|
||||||
<p>部署时,爬虫会被打包到相应的目录中,方便环境隔离,开发环境的爬虫和生产环境的爬虫需要打包部署来实现隔离。</p>
|
|
||||||
|
|
||||||
|
|
||||||
</section>
|
|
||||||
|
|
||||||
</div>
|
|
||||||
<div class="search-results">
|
|
||||||
<div class="has-results">
|
|
||||||
|
|
||||||
<h1 class="search-results-title"><span class='search-results-count'></span> results matching "<span class='search-query'></span>"</h1>
|
|
||||||
<ul class="search-results-list"></ul>
|
|
||||||
|
|
||||||
</div>
|
|
||||||
<div class="no-results">
|
|
||||||
|
|
||||||
<h1 class="search-results-title">No results matching "<span class='search-query'></span>"</h1>
|
|
||||||
|
|
||||||
</div>
|
|
||||||
</div>
|
|
||||||
</div>
|
|
||||||
|
|
||||||
</div>
|
|
||||||
</div>
|
|
||||||
|
|
||||||
</div>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<a href="Task.html" class="navigation navigation-prev " aria-label="Previous page: 任务">
|
|
||||||
<i class="fa fa-angle-left"></i>
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
<a href="../Architecture/" class="navigation navigation-next " aria-label="Next page: 架构">
|
|
||||||
<i class="fa fa-angle-right"></i>
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</div>
|
|
||||||
|
|
||||||
<script>
|
|
||||||
var gitbook = gitbook || [];
|
|
||||||
gitbook.push(function() {
|
|
||||||
gitbook.page.hasChanged({"page":{"title":"部署","level":"1.3.4","depth":2,"next":{"title":"架构","level":"1.4","depth":1,"path":"Architecture/README.md","ref":"Architecture/README.md","articles":[{"title":"Celery","level":"1.4.1","depth":2,"path":"Architecture/Celery.md","ref":"Architecture/Celery.md","articles":[]},{"title":"App","level":"1.4.2","depth":2,"path":"Architecture/App.md","ref":"Architecture/App.md","articles":[]}]},"previous":{"title":"任务","level":"1.3.3","depth":2,"path":"Concept/Task.md","ref":"Concept/Task.md","articles":[]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":[],"pluginsConfig":{"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"Concept/Deploy.md","mtime":"2019-03-28T12:06:24.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-03-28T12:07:05.349Z"},"basePath":"..","book":{"language":""}});
|
|
||||||
});
|
|
||||||
</script>
|
|
||||||
</div>
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook.js"></script>
|
|
||||||
<script src="../gitbook/theme.js"></script>
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-search/search-engine.js"></script>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-search/search.js"></script>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-lunr/lunr.min.js"></script>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-lunr/search-lunr.js"></script>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-sharing/buttons.js"></script>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-fontsettings/fontsettings.js"></script>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</body>
|
|
||||||
</html>
|
|
||||||
|
|
||||||
@@ -399,7 +399,7 @@
|
|||||||
<script>
|
<script>
|
||||||
var gitbook = gitbook || [];
|
var gitbook = gitbook || [];
|
||||||
gitbook.push(function() {
|
gitbook.push(function() {
|
||||||
gitbook.page.hasChanged({"page":{"title":"部署","level":"1.3.4","depth":2,"next":{"title":"架构","level":"1.4","depth":1,"path":"Architecture/README.md","ref":"Architecture/README.md","articles":[{"title":"Celery","level":"1.4.1","depth":2,"path":"Architecture/Celery.md","ref":"Architecture/Celery.md","articles":[]},{"title":"App","level":"1.4.2","depth":2,"path":"Architecture/App.md","ref":"Architecture/App.md","articles":[]}]},"previous":{"title":"任务","level":"1.3.3","depth":2,"path":"Concept/Task.md","ref":"Concept/Task.md","articles":[]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":[],"pluginsConfig":{"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"Concept/Deploy.md","mtime":"2019-03-28T12:06:24.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-03-28T12:07:05.349Z"},"basePath":"..","book":{"language":""}});
|
gitbook.page.hasChanged({"page":{"title":"部署","level":"1.3.4","depth":2,"next":{"title":"架构","level":"1.4","depth":1,"path":"Architecture/README.md","ref":"Architecture/README.md","articles":[{"title":"Celery","level":"1.4.1","depth":2,"path":"Architecture/Celery.md","ref":"Architecture/Celery.md","articles":[]},{"title":"App","level":"1.4.2","depth":2,"path":"Architecture/App.md","ref":"Architecture/App.md","articles":[]}]},"previous":{"title":"任务","level":"1.3.3","depth":2,"path":"Concept/Task.md","ref":"Concept/Task.md","articles":[]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":["livereload"],"pluginsConfig":{"livereload":{},"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"Concept/Deploy.md","mtime":"2019-03-28T12:06:24.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-05-16T11:37:08.921Z"},"basePath":"..","book":{"language":""}});
|
||||||
});
|
});
|
||||||
</script>
|
</script>
|
||||||
</div>
|
</div>
|
||||||
@@ -409,6 +409,10 @@
|
|||||||
<script src="../gitbook/theme.js"></script>
|
<script src="../gitbook/theme.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
<script src="../gitbook/gitbook-plugin-livereload/plugin.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-search/search-engine.js"></script>
|
<script src="../gitbook/gitbook-plugin-search/search-engine.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
|||||||
@@ -398,7 +398,7 @@
|
|||||||
<script>
|
<script>
|
||||||
var gitbook = gitbook || [];
|
var gitbook = gitbook || [];
|
||||||
gitbook.push(function() {
|
gitbook.push(function() {
|
||||||
gitbook.page.hasChanged({"page":{"title":"节点","level":"1.3.1","depth":2,"next":{"title":"爬虫","level":"1.3.2","depth":2,"path":"Concept/Spider.md","ref":"Concept/Spider.md","articles":[]},"previous":{"title":"概念","level":"1.3","depth":1,"path":"Concept/README.md","ref":"Concept/README.md","articles":[{"title":"节点","level":"1.3.1","depth":2,"path":"Concept/Node.md","ref":"Concept/Node.md","articles":[]},{"title":"爬虫","level":"1.3.2","depth":2,"path":"Concept/Spider.md","ref":"Concept/Spider.md","articles":[]},{"title":"任务","level":"1.3.3","depth":2,"path":"Concept/Task.md","ref":"Concept/Task.md","articles":[]},{"title":"部署","level":"1.3.4","depth":2,"path":"Concept/Deploy.md","ref":"Concept/Deploy.md","articles":[]}]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":[],"pluginsConfig":{"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"Concept/Node.md","mtime":"2019-03-28T12:02:43.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-03-28T12:07:05.349Z"},"basePath":"..","book":{"language":""}});
|
gitbook.page.hasChanged({"page":{"title":"节点","level":"1.3.1","depth":2,"next":{"title":"爬虫","level":"1.3.2","depth":2,"path":"Concept/Spider.md","ref":"Concept/Spider.md","articles":[]},"previous":{"title":"概念","level":"1.3","depth":1,"path":"Concept/README.md","ref":"Concept/README.md","articles":[{"title":"节点","level":"1.3.1","depth":2,"path":"Concept/Node.md","ref":"Concept/Node.md","articles":[]},{"title":"爬虫","level":"1.3.2","depth":2,"path":"Concept/Spider.md","ref":"Concept/Spider.md","articles":[]},{"title":"任务","level":"1.3.3","depth":2,"path":"Concept/Task.md","ref":"Concept/Task.md","articles":[]},{"title":"部署","level":"1.3.4","depth":2,"path":"Concept/Deploy.md","ref":"Concept/Deploy.md","articles":[]}]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":["livereload"],"pluginsConfig":{"livereload":{},"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"Concept/Node.md","mtime":"2019-03-28T12:02:43.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-05-16T11:37:08.921Z"},"basePath":"..","book":{"language":""}});
|
||||||
});
|
});
|
||||||
</script>
|
</script>
|
||||||
</div>
|
</div>
|
||||||
@@ -408,6 +408,10 @@
|
|||||||
<script src="../gitbook/theme.js"></script>
|
<script src="../gitbook/theme.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
<script src="../gitbook/gitbook-plugin-livereload/plugin.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-search/search-engine.js"></script>
|
<script src="../gitbook/gitbook-plugin-search/search-engine.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
|||||||
@@ -403,7 +403,7 @@
|
|||||||
<script>
|
<script>
|
||||||
var gitbook = gitbook || [];
|
var gitbook = gitbook || [];
|
||||||
gitbook.push(function() {
|
gitbook.push(function() {
|
||||||
gitbook.page.hasChanged({"page":{"title":"爬虫","level":"1.3.2","depth":2,"next":{"title":"任务","level":"1.3.3","depth":2,"path":"Concept/Task.md","ref":"Concept/Task.md","articles":[]},"previous":{"title":"节点","level":"1.3.1","depth":2,"path":"Concept/Node.md","ref":"Concept/Node.md","articles":[]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":[],"pluginsConfig":{"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"Concept/Spider.md","mtime":"2019-03-28T12:03:08.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-03-28T12:07:05.349Z"},"basePath":"..","book":{"language":""}});
|
gitbook.page.hasChanged({"page":{"title":"爬虫","level":"1.3.2","depth":2,"next":{"title":"任务","level":"1.3.3","depth":2,"path":"Concept/Task.md","ref":"Concept/Task.md","articles":[]},"previous":{"title":"节点","level":"1.3.1","depth":2,"path":"Concept/Node.md","ref":"Concept/Node.md","articles":[]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":["livereload"],"pluginsConfig":{"livereload":{},"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"Concept/Spider.md","mtime":"2019-03-28T12:03:08.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-05-16T11:37:08.921Z"},"basePath":"..","book":{"language":""}});
|
||||||
});
|
});
|
||||||
</script>
|
</script>
|
||||||
</div>
|
</div>
|
||||||
@@ -413,6 +413,10 @@
|
|||||||
<script src="../gitbook/theme.js"></script>
|
<script src="../gitbook/theme.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
<script src="../gitbook/gitbook-plugin-livereload/plugin.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-search/search-engine.js"></script>
|
<script src="../gitbook/gitbook-plugin-search/search-engine.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
|||||||
@@ -398,7 +398,7 @@
|
|||||||
<script>
|
<script>
|
||||||
var gitbook = gitbook || [];
|
var gitbook = gitbook || [];
|
||||||
gitbook.push(function() {
|
gitbook.push(function() {
|
||||||
gitbook.page.hasChanged({"page":{"title":"任务","level":"1.3.3","depth":2,"next":{"title":"部署","level":"1.3.4","depth":2,"path":"Concept/Deploy.md","ref":"Concept/Deploy.md","articles":[]},"previous":{"title":"爬虫","level":"1.3.2","depth":2,"path":"Concept/Spider.md","ref":"Concept/Spider.md","articles":[]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":[],"pluginsConfig":{"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"Concept/Task.md","mtime":"2019-03-28T12:04:12.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-03-28T12:07:05.349Z"},"basePath":"..","book":{"language":""}});
|
gitbook.page.hasChanged({"page":{"title":"任务","level":"1.3.3","depth":2,"next":{"title":"部署","level":"1.3.4","depth":2,"path":"Concept/Deploy.md","ref":"Concept/Deploy.md","articles":[]},"previous":{"title":"爬虫","level":"1.3.2","depth":2,"path":"Concept/Spider.md","ref":"Concept/Spider.md","articles":[]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":["livereload"],"pluginsConfig":{"livereload":{},"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"Concept/Task.md","mtime":"2019-03-28T12:04:12.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-05-16T11:37:08.921Z"},"basePath":"..","book":{"language":""}});
|
||||||
});
|
});
|
||||||
</script>
|
</script>
|
||||||
</div>
|
</div>
|
||||||
@@ -408,6 +408,10 @@
|
|||||||
<script src="../gitbook/theme.js"></script>
|
<script src="../gitbook/theme.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
<script src="../gitbook/gitbook-plugin-livereload/plugin.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-search/search-engine.js"></script>
|
<script src="../gitbook/gitbook-plugin-search/search-engine.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
|||||||
@@ -397,7 +397,7 @@
|
|||||||
<script>
|
<script>
|
||||||
var gitbook = gitbook || [];
|
var gitbook = gitbook || [];
|
||||||
gitbook.push(function() {
|
gitbook.push(function() {
|
||||||
gitbook.page.hasChanged({"page":{"title":"概念","level":"1.3","depth":1,"next":{"title":"节点","level":"1.3.1","depth":2,"path":"Concept/Node.md","ref":"Concept/Node.md","articles":[]},"previous":{"title":"运行","level":"1.2.2","depth":2,"path":"QuickStart/Run.md","ref":"QuickStart/Run.md","articles":[]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":[],"pluginsConfig":{"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"Concept/README.md","mtime":"2019-03-28T11:49:43.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-03-28T12:07:05.349Z"},"basePath":"..","book":{"language":""}});
|
gitbook.page.hasChanged({"page":{"title":"概念","level":"1.3","depth":1,"next":{"title":"节点","level":"1.3.1","depth":2,"path":"Concept/Node.md","ref":"Concept/Node.md","articles":[]},"previous":{"title":"运行","level":"1.2.2","depth":2,"path":"QuickStart/Run.md","ref":"QuickStart/Run.md","articles":[]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":["livereload"],"pluginsConfig":{"livereload":{},"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"Concept/README.md","mtime":"2019-03-28T11:49:43.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-05-16T11:37:08.921Z"},"basePath":"..","book":{"language":""}});
|
||||||
});
|
});
|
||||||
</script>
|
</script>
|
||||||
</div>
|
</div>
|
||||||
@@ -407,6 +407,10 @@
|
|||||||
<script src="../gitbook/theme.js"></script>
|
<script src="../gitbook/theme.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
<script src="../gitbook/gitbook-plugin-livereload/plugin.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-search/search-engine.js"></script>
|
<script src="../gitbook/gitbook-plugin-search/search-engine.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
|||||||
@@ -1,436 +0,0 @@
|
|||||||
|
|
||||||
<!DOCTYPE HTML>
|
|
||||||
<html lang="" >
|
|
||||||
<head>
|
|
||||||
<meta charset="UTF-8">
|
|
||||||
<meta content="text/html; charset=utf-8" http-equiv="Content-Type">
|
|
||||||
<title>Examples · GitBook</title>
|
|
||||||
<meta http-equiv="X-UA-Compatible" content="IE=edge" />
|
|
||||||
<meta name="description" content="">
|
|
||||||
<meta name="generator" content="GitBook 3.2.3">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<link rel="stylesheet" href="../gitbook/style.css">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<link rel="stylesheet" href="../gitbook/gitbook-plugin-highlight/website.css">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<link rel="stylesheet" href="../gitbook/gitbook-plugin-search/search.css">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<link rel="stylesheet" href="../gitbook/gitbook-plugin-fontsettings/website.css">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<meta name="HandheldFriendly" content="true"/>
|
|
||||||
<meta name="viewport" content="width=device-width, initial-scale=1, user-scalable=no">
|
|
||||||
<meta name="apple-mobile-web-app-capable" content="yes">
|
|
||||||
<meta name="apple-mobile-web-app-status-bar-style" content="black">
|
|
||||||
<link rel="apple-touch-icon-precomposed" sizes="152x152" href="../gitbook/images/apple-touch-icon-precomposed-152.png">
|
|
||||||
<link rel="shortcut icon" href="../gitbook/images/favicon.ico" type="image/x-icon">
|
|
||||||
|
|
||||||
|
|
||||||
<link rel="next" href="./" />
|
|
||||||
|
|
||||||
|
|
||||||
<link rel="prev" href="../Architecture/App.html" />
|
|
||||||
|
|
||||||
|
|
||||||
</head>
|
|
||||||
<body>
|
|
||||||
|
|
||||||
<div class="book">
|
|
||||||
<div class="book-summary">
|
|
||||||
|
|
||||||
|
|
||||||
<div id="book-search-input" role="search">
|
|
||||||
<input type="text" placeholder="Type to search" />
|
|
||||||
</div>
|
|
||||||
|
|
||||||
|
|
||||||
<nav role="navigation">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<ul class="summary">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.1" data-path="../">
|
|
||||||
|
|
||||||
<a href="../">
|
|
||||||
|
|
||||||
|
|
||||||
简介
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.2" data-path="../QuickStart/">
|
|
||||||
|
|
||||||
<a href="../QuickStart/">
|
|
||||||
|
|
||||||
|
|
||||||
快速开始
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<ul class="articles">
|
|
||||||
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.2.1" data-path="../QuickStart/Installation.html">
|
|
||||||
|
|
||||||
<a href="../QuickStart/Installation.html">
|
|
||||||
|
|
||||||
|
|
||||||
安装
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.2.2" data-path="../QuickStart/Run.html">
|
|
||||||
|
|
||||||
<a href="../QuickStart/Run.html">
|
|
||||||
|
|
||||||
|
|
||||||
运行
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
|
|
||||||
</ul>
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.3" data-path="../Concept/">
|
|
||||||
|
|
||||||
<a href="../Concept/">
|
|
||||||
|
|
||||||
|
|
||||||
概念
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<ul class="articles">
|
|
||||||
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.3.1" data-path="../Concept/Node.html">
|
|
||||||
|
|
||||||
<a href="../Concept/Node.html">
|
|
||||||
|
|
||||||
|
|
||||||
节点
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.3.2" data-path="../Concept/Spider.html">
|
|
||||||
|
|
||||||
<a href="../Concept/Spider.html">
|
|
||||||
|
|
||||||
|
|
||||||
爬虫
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.3.3" data-path="../Concept/Task.html">
|
|
||||||
|
|
||||||
<a href="../Concept/Task.html">
|
|
||||||
|
|
||||||
|
|
||||||
任务
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.3.4" data-path="../Concept/Deploy.html">
|
|
||||||
|
|
||||||
<a href="../Concept/Deploy.html">
|
|
||||||
|
|
||||||
|
|
||||||
部署
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
|
|
||||||
</ul>
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.4" data-path="../Architecture/">
|
|
||||||
|
|
||||||
<a href="../Architecture/">
|
|
||||||
|
|
||||||
|
|
||||||
架构
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<ul class="articles">
|
|
||||||
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.4.1" data-path="../Architecture/Celery.html">
|
|
||||||
|
|
||||||
<a href="../Architecture/Celery.html">
|
|
||||||
|
|
||||||
|
|
||||||
Celery
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.4.2" data-path="../Architecture/App.html">
|
|
||||||
|
|
||||||
<a href="../Architecture/App.html">
|
|
||||||
|
|
||||||
|
|
||||||
App
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
|
|
||||||
</ul>
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter active" data-level="1.5" data-path="./">
|
|
||||||
|
|
||||||
<a href="./">
|
|
||||||
|
|
||||||
|
|
||||||
Examples
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<ul class="articles">
|
|
||||||
|
|
||||||
|
|
||||||
<li class="chapter active" data-level="1.5.1" data-path="./">
|
|
||||||
|
|
||||||
<a href="./">
|
|
||||||
|
|
||||||
|
|
||||||
与Scrapy集成
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter active" data-level="1.5.2" data-path="./">
|
|
||||||
|
|
||||||
<a href="./">
|
|
||||||
|
|
||||||
|
|
||||||
与Puppeteer集成
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
|
|
||||||
</ul>
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<li class="divider"></li>
|
|
||||||
|
|
||||||
<li>
|
|
||||||
<a href="https://www.gitbook.com" target="blank" class="gitbook-link">
|
|
||||||
Published with GitBook
|
|
||||||
</a>
|
|
||||||
</li>
|
|
||||||
</ul>
|
|
||||||
|
|
||||||
|
|
||||||
</nav>
|
|
||||||
|
|
||||||
|
|
||||||
</div>
|
|
||||||
|
|
||||||
<div class="book-body">
|
|
||||||
|
|
||||||
<div class="body-inner">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<div class="book-header" role="navigation">
|
|
||||||
|
|
||||||
|
|
||||||
<!-- Title -->
|
|
||||||
<h1>
|
|
||||||
<i class="fa fa-circle-o-notch fa-spin"></i>
|
|
||||||
<a href=".." >Examples</a>
|
|
||||||
</h1>
|
|
||||||
</div>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<div class="page-wrapper" tabindex="-1" role="main">
|
|
||||||
<div class="page-inner">
|
|
||||||
|
|
||||||
<div id="book-search-results">
|
|
||||||
<div class="search-noresults">
|
|
||||||
|
|
||||||
<section class="normal markdown-section">
|
|
||||||
|
|
||||||
<h1 id="examples">Examples</h1>
|
|
||||||
|
|
||||||
|
|
||||||
</section>
|
|
||||||
|
|
||||||
</div>
|
|
||||||
<div class="search-results">
|
|
||||||
<div class="has-results">
|
|
||||||
|
|
||||||
<h1 class="search-results-title"><span class='search-results-count'></span> results matching "<span class='search-query'></span>"</h1>
|
|
||||||
<ul class="search-results-list"></ul>
|
|
||||||
|
|
||||||
</div>
|
|
||||||
<div class="no-results">
|
|
||||||
|
|
||||||
<h1 class="search-results-title">No results matching "<span class='search-query'></span>"</h1>
|
|
||||||
|
|
||||||
</div>
|
|
||||||
</div>
|
|
||||||
</div>
|
|
||||||
|
|
||||||
</div>
|
|
||||||
</div>
|
|
||||||
|
|
||||||
</div>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<a href="../Architecture/App.html" class="navigation navigation-prev " aria-label="Previous page: App">
|
|
||||||
<i class="fa fa-angle-left"></i>
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
<a href="./" class="navigation navigation-next " aria-label="Next page: 与Scrapy集成">
|
|
||||||
<i class="fa fa-angle-right"></i>
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</div>
|
|
||||||
|
|
||||||
<script>
|
|
||||||
var gitbook = gitbook || [];
|
|
||||||
gitbook.push(function() {
|
|
||||||
gitbook.page.hasChanged({"page":{"title":"Examples","level":"1.5","depth":1,"next":{"title":"与Scrapy集成","level":"1.5.1","depth":2,"path":"Examples/README.md","ref":"Examples/README.md","articles":[]},"previous":{"title":"App","level":"1.4.2","depth":2,"path":"Architecture/App.md","ref":"Architecture/App.md","articles":[]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":[],"pluginsConfig":{"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"Examples/README.md","mtime":"2019-03-28T11:41:28.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-03-28T12:07:05.349Z"},"basePath":"..","book":{"language":""}});
|
|
||||||
});
|
|
||||||
</script>
|
|
||||||
</div>
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook.js"></script>
|
|
||||||
<script src="../gitbook/theme.js"></script>
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-search/search-engine.js"></script>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-search/search.js"></script>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-lunr/lunr.min.js"></script>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-lunr/search-lunr.js"></script>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-sharing/buttons.js"></script>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-fontsettings/fontsettings.js"></script>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</body>
|
|
||||||
</html>
|
|
||||||
|
|
||||||
@@ -397,7 +397,7 @@
|
|||||||
<script>
|
<script>
|
||||||
var gitbook = gitbook || [];
|
var gitbook = gitbook || [];
|
||||||
gitbook.push(function() {
|
gitbook.push(function() {
|
||||||
gitbook.page.hasChanged({"page":{"title":"Examples","level":"1.5","depth":1,"next":{"title":"与Scrapy集成","level":"1.5.1","depth":2,"path":"Examples/README.md","ref":"Examples/README.md","articles":[]},"previous":{"title":"App","level":"1.4.2","depth":2,"path":"Architecture/App.md","ref":"Architecture/App.md","articles":[]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":[],"pluginsConfig":{"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"Examples/README.md","mtime":"2019-03-28T11:41:28.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-03-28T12:07:05.349Z"},"basePath":"..","book":{"language":""}});
|
gitbook.page.hasChanged({"page":{"title":"Examples","level":"1.5","depth":1,"next":{"title":"与Scrapy集成","level":"1.5.1","depth":2,"path":"Examples/README.md","ref":"Examples/README.md","articles":[]},"previous":{"title":"App","level":"1.4.2","depth":2,"path":"Architecture/App.md","ref":"Architecture/App.md","articles":[]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":["livereload"],"pluginsConfig":{"livereload":{},"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"Examples/README.md","mtime":"2019-03-28T11:41:28.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-05-16T11:37:08.921Z"},"basePath":"..","book":{"language":""}});
|
||||||
});
|
});
|
||||||
</script>
|
</script>
|
||||||
</div>
|
</div>
|
||||||
@@ -407,6 +407,10 @@
|
|||||||
<script src="../gitbook/theme.js"></script>
|
<script src="../gitbook/theme.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
<script src="../gitbook/gitbook-plugin-livereload/plugin.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-search/search-engine.js"></script>
|
<script src="../gitbook/gitbook-plugin-search/search-engine.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
|||||||
@@ -1,447 +0,0 @@
|
|||||||
|
|
||||||
<!DOCTYPE HTML>
|
|
||||||
<html lang="" >
|
|
||||||
<head>
|
|
||||||
<meta charset="UTF-8">
|
|
||||||
<meta content="text/html; charset=utf-8" http-equiv="Content-Type">
|
|
||||||
<title>安装 · GitBook</title>
|
|
||||||
<meta http-equiv="X-UA-Compatible" content="IE=edge" />
|
|
||||||
<meta name="description" content="">
|
|
||||||
<meta name="generator" content="GitBook 3.2.3">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<link rel="stylesheet" href="../gitbook/style.css">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<link rel="stylesheet" href="../gitbook/gitbook-plugin-highlight/website.css">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<link rel="stylesheet" href="../gitbook/gitbook-plugin-search/search.css">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<link rel="stylesheet" href="../gitbook/gitbook-plugin-fontsettings/website.css">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<meta name="HandheldFriendly" content="true"/>
|
|
||||||
<meta name="viewport" content="width=device-width, initial-scale=1, user-scalable=no">
|
|
||||||
<meta name="apple-mobile-web-app-capable" content="yes">
|
|
||||||
<meta name="apple-mobile-web-app-status-bar-style" content="black">
|
|
||||||
<link rel="apple-touch-icon-precomposed" sizes="152x152" href="../gitbook/images/apple-touch-icon-precomposed-152.png">
|
|
||||||
<link rel="shortcut icon" href="../gitbook/images/favicon.ico" type="image/x-icon">
|
|
||||||
|
|
||||||
|
|
||||||
<link rel="next" href="Run.html" />
|
|
||||||
|
|
||||||
|
|
||||||
<link rel="prev" href="./" />
|
|
||||||
|
|
||||||
|
|
||||||
</head>
|
|
||||||
<body>
|
|
||||||
|
|
||||||
<div class="book">
|
|
||||||
<div class="book-summary">
|
|
||||||
|
|
||||||
|
|
||||||
<div id="book-search-input" role="search">
|
|
||||||
<input type="text" placeholder="Type to search" />
|
|
||||||
</div>
|
|
||||||
|
|
||||||
|
|
||||||
<nav role="navigation">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<ul class="summary">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.1" data-path="../">
|
|
||||||
|
|
||||||
<a href="../">
|
|
||||||
|
|
||||||
|
|
||||||
简介
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.2" data-path="./">
|
|
||||||
|
|
||||||
<a href="./">
|
|
||||||
|
|
||||||
|
|
||||||
快速开始
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<ul class="articles">
|
|
||||||
|
|
||||||
|
|
||||||
<li class="chapter active" data-level="1.2.1" data-path="Installation.html">
|
|
||||||
|
|
||||||
<a href="Installation.html">
|
|
||||||
|
|
||||||
|
|
||||||
安装
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.2.2" data-path="Run.html">
|
|
||||||
|
|
||||||
<a href="Run.html">
|
|
||||||
|
|
||||||
|
|
||||||
运行
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
|
|
||||||
</ul>
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.3" data-path="../Concept/">
|
|
||||||
|
|
||||||
<a href="../Concept/">
|
|
||||||
|
|
||||||
|
|
||||||
概念
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<ul class="articles">
|
|
||||||
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.3.1" data-path="../Concept/Node.html">
|
|
||||||
|
|
||||||
<a href="../Concept/Node.html">
|
|
||||||
|
|
||||||
|
|
||||||
节点
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.3.2" data-path="../Concept/Spider.html">
|
|
||||||
|
|
||||||
<a href="../Concept/Spider.html">
|
|
||||||
|
|
||||||
|
|
||||||
爬虫
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.3.3" data-path="../Concept/Task.html">
|
|
||||||
|
|
||||||
<a href="../Concept/Task.html">
|
|
||||||
|
|
||||||
|
|
||||||
任务
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.3.4" data-path="../Concept/Deploy.html">
|
|
||||||
|
|
||||||
<a href="../Concept/Deploy.html">
|
|
||||||
|
|
||||||
|
|
||||||
部署
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
|
|
||||||
</ul>
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.4" data-path="../Architecture/">
|
|
||||||
|
|
||||||
<a href="../Architecture/">
|
|
||||||
|
|
||||||
|
|
||||||
架构
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<ul class="articles">
|
|
||||||
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.4.1" data-path="../Architecture/Celery.html">
|
|
||||||
|
|
||||||
<a href="../Architecture/Celery.html">
|
|
||||||
|
|
||||||
|
|
||||||
Celery
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.4.2" data-path="../Architecture/App.html">
|
|
||||||
|
|
||||||
<a href="../Architecture/App.html">
|
|
||||||
|
|
||||||
|
|
||||||
App
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
|
|
||||||
</ul>
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.5" data-path="../Examples/">
|
|
||||||
|
|
||||||
<a href="../Examples/">
|
|
||||||
|
|
||||||
|
|
||||||
Examples
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<ul class="articles">
|
|
||||||
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.5.1" data-path="../Examples/">
|
|
||||||
|
|
||||||
<a href="../Examples/">
|
|
||||||
|
|
||||||
|
|
||||||
与Scrapy集成
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
<li class="chapter " data-level="1.5.2" data-path="../Examples/">
|
|
||||||
|
|
||||||
<a href="../Examples/">
|
|
||||||
|
|
||||||
|
|
||||||
与Puppeteer集成
|
|
||||||
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
|
|
||||||
</ul>
|
|
||||||
|
|
||||||
</li>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<li class="divider"></li>
|
|
||||||
|
|
||||||
<li>
|
|
||||||
<a href="https://www.gitbook.com" target="blank" class="gitbook-link">
|
|
||||||
Published with GitBook
|
|
||||||
</a>
|
|
||||||
</li>
|
|
||||||
</ul>
|
|
||||||
|
|
||||||
|
|
||||||
</nav>
|
|
||||||
|
|
||||||
|
|
||||||
</div>
|
|
||||||
|
|
||||||
<div class="book-body">
|
|
||||||
|
|
||||||
<div class="body-inner">
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<div class="book-header" role="navigation">
|
|
||||||
|
|
||||||
|
|
||||||
<!-- Title -->
|
|
||||||
<h1>
|
|
||||||
<i class="fa fa-circle-o-notch fa-spin"></i>
|
|
||||||
<a href=".." >安装</a>
|
|
||||||
</h1>
|
|
||||||
</div>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<div class="page-wrapper" tabindex="-1" role="main">
|
|
||||||
<div class="page-inner">
|
|
||||||
|
|
||||||
<div id="book-search-results">
|
|
||||||
<div class="search-noresults">
|
|
||||||
|
|
||||||
<section class="normal markdown-section">
|
|
||||||
|
|
||||||
<h1 id="安装">安装</h1>
|
|
||||||
<p>最快安装Crawlab的方式是克隆一份代码到本地</p>
|
|
||||||
<pre><code class="lang-bash">git <span class="hljs-built_in">clone</span> https://github.com/tikazyq/crawlab
|
|
||||||
</code></pre>
|
|
||||||
<p>安装类库</p>
|
|
||||||
<pre><code class="lang-bash"><span class="hljs-comment"># 安装后台类库</span>
|
|
||||||
pip install -r requirements.txt
|
|
||||||
</code></pre>
|
|
||||||
<pre><code class="lang-bash"><span class="hljs-comment"># 安装前台类库</span>
|
|
||||||
<span class="hljs-built_in">cd</span> frontend
|
|
||||||
npm install
|
|
||||||
</code></pre>
|
|
||||||
|
|
||||||
|
|
||||||
</section>
|
|
||||||
|
|
||||||
</div>
|
|
||||||
<div class="search-results">
|
|
||||||
<div class="has-results">
|
|
||||||
|
|
||||||
<h1 class="search-results-title"><span class='search-results-count'></span> results matching "<span class='search-query'></span>"</h1>
|
|
||||||
<ul class="search-results-list"></ul>
|
|
||||||
|
|
||||||
</div>
|
|
||||||
<div class="no-results">
|
|
||||||
|
|
||||||
<h1 class="search-results-title">No results matching "<span class='search-query'></span>"</h1>
|
|
||||||
|
|
||||||
</div>
|
|
||||||
</div>
|
|
||||||
</div>
|
|
||||||
|
|
||||||
</div>
|
|
||||||
</div>
|
|
||||||
|
|
||||||
</div>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<a href="./" class="navigation navigation-prev " aria-label="Previous page: 快速开始">
|
|
||||||
<i class="fa fa-angle-left"></i>
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
<a href="Run.html" class="navigation navigation-next " aria-label="Next page: 运行">
|
|
||||||
<i class="fa fa-angle-right"></i>
|
|
||||||
</a>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</div>
|
|
||||||
|
|
||||||
<script>
|
|
||||||
var gitbook = gitbook || [];
|
|
||||||
gitbook.push(function() {
|
|
||||||
gitbook.page.hasChanged({"page":{"title":"安装","level":"1.2.1","depth":2,"next":{"title":"运行","level":"1.2.2","depth":2,"path":"QuickStart/Run.md","ref":"QuickStart/Run.md","articles":[]},"previous":{"title":"快速开始","level":"1.2","depth":1,"path":"QuickStart/README.md","ref":"QuickStart/README.md","articles":[{"title":"安装","level":"1.2.1","depth":2,"path":"QuickStart/Installation.md","ref":"QuickStart/Installation.md","articles":[]},{"title":"运行","level":"1.2.2","depth":2,"path":"QuickStart/Run.md","ref":"QuickStart/Run.md","articles":[]}]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":[],"pluginsConfig":{"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"QuickStart/Installation.md","mtime":"2019-03-28T11:55:48.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-03-28T12:07:05.349Z"},"basePath":"..","book":{"language":""}});
|
|
||||||
});
|
|
||||||
</script>
|
|
||||||
</div>
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook.js"></script>
|
|
||||||
<script src="../gitbook/theme.js"></script>
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-search/search-engine.js"></script>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-search/search.js"></script>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-lunr/lunr.min.js"></script>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-lunr/search-lunr.js"></script>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-sharing/buttons.js"></script>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-fontsettings/fontsettings.js"></script>
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
</body>
|
|
||||||
</html>
|
|
||||||
|
|
||||||
@@ -408,7 +408,7 @@ npm install
|
|||||||
<script>
|
<script>
|
||||||
var gitbook = gitbook || [];
|
var gitbook = gitbook || [];
|
||||||
gitbook.push(function() {
|
gitbook.push(function() {
|
||||||
gitbook.page.hasChanged({"page":{"title":"安装","level":"1.2.1","depth":2,"next":{"title":"运行","level":"1.2.2","depth":2,"path":"QuickStart/Run.md","ref":"QuickStart/Run.md","articles":[]},"previous":{"title":"快速开始","level":"1.2","depth":1,"path":"QuickStart/README.md","ref":"QuickStart/README.md","articles":[{"title":"安装","level":"1.2.1","depth":2,"path":"QuickStart/Installation.md","ref":"QuickStart/Installation.md","articles":[]},{"title":"运行","level":"1.2.2","depth":2,"path":"QuickStart/Run.md","ref":"QuickStart/Run.md","articles":[]}]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":[],"pluginsConfig":{"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"QuickStart/Installation.md","mtime":"2019-03-28T11:55:48.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-03-28T12:07:05.349Z"},"basePath":"..","book":{"language":""}});
|
gitbook.page.hasChanged({"page":{"title":"安装","level":"1.2.1","depth":2,"next":{"title":"运行","level":"1.2.2","depth":2,"path":"QuickStart/Run.md","ref":"QuickStart/Run.md","articles":[]},"previous":{"title":"快速开始","level":"1.2","depth":1,"path":"QuickStart/README.md","ref":"QuickStart/README.md","articles":[{"title":"安装","level":"1.2.1","depth":2,"path":"QuickStart/Installation.md","ref":"QuickStart/Installation.md","articles":[]},{"title":"运行","level":"1.2.2","depth":2,"path":"QuickStart/Run.md","ref":"QuickStart/Run.md","articles":[]}]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":["livereload"],"pluginsConfig":{"livereload":{},"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"QuickStart/Installation.md","mtime":"2019-03-28T11:55:48.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-05-16T11:37:08.921Z"},"basePath":"..","book":{"language":""}});
|
||||||
});
|
});
|
||||||
</script>
|
</script>
|
||||||
</div>
|
</div>
|
||||||
@@ -418,6 +418,10 @@ npm install
|
|||||||
<script src="../gitbook/theme.js"></script>
|
<script src="../gitbook/theme.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
<script src="../gitbook/gitbook-plugin-livereload/plugin.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-search/search-engine.js"></script>
|
<script src="../gitbook/gitbook-plugin-search/search-engine.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
|||||||
@@ -440,7 +440,7 @@ npm run serve
|
|||||||
<script>
|
<script>
|
||||||
var gitbook = gitbook || [];
|
var gitbook = gitbook || [];
|
||||||
gitbook.push(function() {
|
gitbook.push(function() {
|
||||||
gitbook.page.hasChanged({"page":{"title":"运行","level":"1.2.2","depth":2,"next":{"title":"概念","level":"1.3","depth":1,"path":"Concept/README.md","ref":"Concept/README.md","articles":[{"title":"节点","level":"1.3.1","depth":2,"path":"Concept/Node.md","ref":"Concept/Node.md","articles":[]},{"title":"爬虫","level":"1.3.2","depth":2,"path":"Concept/Spider.md","ref":"Concept/Spider.md","articles":[]},{"title":"任务","level":"1.3.3","depth":2,"path":"Concept/Task.md","ref":"Concept/Task.md","articles":[]},{"title":"部署","level":"1.3.4","depth":2,"path":"Concept/Deploy.md","ref":"Concept/Deploy.md","articles":[]}]},"previous":{"title":"安装","level":"1.2.1","depth":2,"path":"QuickStart/Installation.md","ref":"QuickStart/Installation.md","articles":[]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":[],"pluginsConfig":{"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"QuickStart/Run.md","mtime":"2019-03-28T12:00:11.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-03-28T12:07:05.349Z"},"basePath":"..","book":{"language":""}});
|
gitbook.page.hasChanged({"page":{"title":"运行","level":"1.2.2","depth":2,"next":{"title":"概念","level":"1.3","depth":1,"path":"Concept/README.md","ref":"Concept/README.md","articles":[{"title":"节点","level":"1.3.1","depth":2,"path":"Concept/Node.md","ref":"Concept/Node.md","articles":[]},{"title":"爬虫","level":"1.3.2","depth":2,"path":"Concept/Spider.md","ref":"Concept/Spider.md","articles":[]},{"title":"任务","level":"1.3.3","depth":2,"path":"Concept/Task.md","ref":"Concept/Task.md","articles":[]},{"title":"部署","level":"1.3.4","depth":2,"path":"Concept/Deploy.md","ref":"Concept/Deploy.md","articles":[]}]},"previous":{"title":"安装","level":"1.2.1","depth":2,"path":"QuickStart/Installation.md","ref":"QuickStart/Installation.md","articles":[]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":["livereload"],"pluginsConfig":{"livereload":{},"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"QuickStart/Run.md","mtime":"2019-03-28T12:00:11.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-05-16T11:37:08.921Z"},"basePath":"..","book":{"language":""}});
|
||||||
});
|
});
|
||||||
</script>
|
</script>
|
||||||
</div>
|
</div>
|
||||||
@@ -450,6 +450,10 @@ npm run serve
|
|||||||
<script src="../gitbook/theme.js"></script>
|
<script src="../gitbook/theme.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
<script src="../gitbook/gitbook-plugin-livereload/plugin.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-search/search-engine.js"></script>
|
<script src="../gitbook/gitbook-plugin-search/search-engine.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
|||||||
@@ -401,7 +401,7 @@
|
|||||||
<script>
|
<script>
|
||||||
var gitbook = gitbook || [];
|
var gitbook = gitbook || [];
|
||||||
gitbook.push(function() {
|
gitbook.push(function() {
|
||||||
gitbook.page.hasChanged({"page":{"title":"快速开始","level":"1.2","depth":1,"next":{"title":"安装","level":"1.2.1","depth":2,"path":"QuickStart/Installation.md","ref":"QuickStart/Installation.md","articles":[]},"previous":{"title":"简介","level":"1.1","depth":1,"path":"README.md","ref":"README.md","articles":[]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":[],"pluginsConfig":{"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"QuickStart/README.md","mtime":"2019-03-28T12:02:02.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-03-28T12:07:05.349Z"},"basePath":"..","book":{"language":""}});
|
gitbook.page.hasChanged({"page":{"title":"快速开始","level":"1.2","depth":1,"next":{"title":"安装","level":"1.2.1","depth":2,"path":"QuickStart/Installation.md","ref":"QuickStart/Installation.md","articles":[]},"previous":{"title":"简介","level":"1.1","depth":1,"path":"README.md","ref":"README.md","articles":[]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":["livereload"],"pluginsConfig":{"livereload":{},"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"QuickStart/README.md","mtime":"2019-03-28T12:02:02.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-05-16T11:37:08.921Z"},"basePath":"..","book":{"language":""}});
|
||||||
});
|
});
|
||||||
</script>
|
</script>
|
||||||
</div>
|
</div>
|
||||||
@@ -411,6 +411,10 @@
|
|||||||
<script src="../gitbook/theme.js"></script>
|
<script src="../gitbook/theme.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
<script src="../gitbook/gitbook-plugin-livereload/plugin.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="../gitbook/gitbook-plugin-search/search-engine.js"></script>
|
<script src="../gitbook/gitbook-plugin-search/search-engine.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
|||||||
Binary file not shown.
@@ -1,240 +0,0 @@
|
|||||||
require(['gitbook', 'jquery'], function(gitbook, $) {
|
|
||||||
// Configuration
|
|
||||||
var MAX_SIZE = 4,
|
|
||||||
MIN_SIZE = 0,
|
|
||||||
BUTTON_ID;
|
|
||||||
|
|
||||||
// Current fontsettings state
|
|
||||||
var fontState;
|
|
||||||
|
|
||||||
// Default themes
|
|
||||||
var THEMES = [
|
|
||||||
{
|
|
||||||
config: 'white',
|
|
||||||
text: 'White',
|
|
||||||
id: 0
|
|
||||||
},
|
|
||||||
{
|
|
||||||
config: 'sepia',
|
|
||||||
text: 'Sepia',
|
|
||||||
id: 1
|
|
||||||
},
|
|
||||||
{
|
|
||||||
config: 'night',
|
|
||||||
text: 'Night',
|
|
||||||
id: 2
|
|
||||||
}
|
|
||||||
];
|
|
||||||
|
|
||||||
// Default font families
|
|
||||||
var FAMILIES = [
|
|
||||||
{
|
|
||||||
config: 'serif',
|
|
||||||
text: 'Serif',
|
|
||||||
id: 0
|
|
||||||
},
|
|
||||||
{
|
|
||||||
config: 'sans',
|
|
||||||
text: 'Sans',
|
|
||||||
id: 1
|
|
||||||
}
|
|
||||||
];
|
|
||||||
|
|
||||||
// Return configured themes
|
|
||||||
function getThemes() {
|
|
||||||
return THEMES;
|
|
||||||
}
|
|
||||||
|
|
||||||
// Modify configured themes
|
|
||||||
function setThemes(themes) {
|
|
||||||
THEMES = themes;
|
|
||||||
updateButtons();
|
|
||||||
}
|
|
||||||
|
|
||||||
// Return configured font families
|
|
||||||
function getFamilies() {
|
|
||||||
return FAMILIES;
|
|
||||||
}
|
|
||||||
|
|
||||||
// Modify configured font families
|
|
||||||
function setFamilies(families) {
|
|
||||||
FAMILIES = families;
|
|
||||||
updateButtons();
|
|
||||||
}
|
|
||||||
|
|
||||||
// Save current font settings
|
|
||||||
function saveFontSettings() {
|
|
||||||
gitbook.storage.set('fontState', fontState);
|
|
||||||
update();
|
|
||||||
}
|
|
||||||
|
|
||||||
// Increase font size
|
|
||||||
function enlargeFontSize(e) {
|
|
||||||
e.preventDefault();
|
|
||||||
if (fontState.size >= MAX_SIZE) return;
|
|
||||||
|
|
||||||
fontState.size++;
|
|
||||||
saveFontSettings();
|
|
||||||
}
|
|
||||||
|
|
||||||
// Decrease font size
|
|
||||||
function reduceFontSize(e) {
|
|
||||||
e.preventDefault();
|
|
||||||
if (fontState.size <= MIN_SIZE) return;
|
|
||||||
|
|
||||||
fontState.size--;
|
|
||||||
saveFontSettings();
|
|
||||||
}
|
|
||||||
|
|
||||||
// Change font family
|
|
||||||
function changeFontFamily(configName, e) {
|
|
||||||
if (e && e instanceof Event) {
|
|
||||||
e.preventDefault();
|
|
||||||
}
|
|
||||||
|
|
||||||
var familyId = getFontFamilyId(configName);
|
|
||||||
fontState.family = familyId;
|
|
||||||
saveFontSettings();
|
|
||||||
}
|
|
||||||
|
|
||||||
// Change type of color theme
|
|
||||||
function changeColorTheme(configName, e) {
|
|
||||||
if (e && e instanceof Event) {
|
|
||||||
e.preventDefault();
|
|
||||||
}
|
|
||||||
|
|
||||||
var $book = gitbook.state.$book;
|
|
||||||
|
|
||||||
// Remove currently applied color theme
|
|
||||||
if (fontState.theme !== 0)
|
|
||||||
$book.removeClass('color-theme-'+fontState.theme);
|
|
||||||
|
|
||||||
// Set new color theme
|
|
||||||
var themeId = getThemeId(configName);
|
|
||||||
fontState.theme = themeId;
|
|
||||||
if (fontState.theme !== 0)
|
|
||||||
$book.addClass('color-theme-'+fontState.theme);
|
|
||||||
|
|
||||||
saveFontSettings();
|
|
||||||
}
|
|
||||||
|
|
||||||
// Return the correct id for a font-family config key
|
|
||||||
// Default to first font-family
|
|
||||||
function getFontFamilyId(configName) {
|
|
||||||
// Search for plugin configured font family
|
|
||||||
var configFamily = $.grep(FAMILIES, function(family) {
|
|
||||||
return family.config == configName;
|
|
||||||
})[0];
|
|
||||||
// Fallback to default font family
|
|
||||||
return (!!configFamily)? configFamily.id : 0;
|
|
||||||
}
|
|
||||||
|
|
||||||
// Return the correct id for a theme config key
|
|
||||||
// Default to first theme
|
|
||||||
function getThemeId(configName) {
|
|
||||||
// Search for plugin configured theme
|
|
||||||
var configTheme = $.grep(THEMES, function(theme) {
|
|
||||||
return theme.config == configName;
|
|
||||||
})[0];
|
|
||||||
// Fallback to default theme
|
|
||||||
return (!!configTheme)? configTheme.id : 0;
|
|
||||||
}
|
|
||||||
|
|
||||||
function update() {
|
|
||||||
var $book = gitbook.state.$book;
|
|
||||||
|
|
||||||
$('.font-settings .font-family-list li').removeClass('active');
|
|
||||||
$('.font-settings .font-family-list li:nth-child('+(fontState.family+1)+')').addClass('active');
|
|
||||||
|
|
||||||
$book[0].className = $book[0].className.replace(/\bfont-\S+/g, '');
|
|
||||||
$book.addClass('font-size-'+fontState.size);
|
|
||||||
$book.addClass('font-family-'+fontState.family);
|
|
||||||
|
|
||||||
if(fontState.theme !== 0) {
|
|
||||||
$book[0].className = $book[0].className.replace(/\bcolor-theme-\S+/g, '');
|
|
||||||
$book.addClass('color-theme-'+fontState.theme);
|
|
||||||
}
|
|
||||||
}
|
|
||||||
|
|
||||||
function init(config) {
|
|
||||||
// Search for plugin configured font family
|
|
||||||
var configFamily = getFontFamilyId(config.family),
|
|
||||||
configTheme = getThemeId(config.theme);
|
|
||||||
|
|
||||||
// Instantiate font state object
|
|
||||||
fontState = gitbook.storage.get('fontState', {
|
|
||||||
size: config.size || 2,
|
|
||||||
family: configFamily,
|
|
||||||
theme: configTheme
|
|
||||||
});
|
|
||||||
|
|
||||||
update();
|
|
||||||
}
|
|
||||||
|
|
||||||
function updateButtons() {
|
|
||||||
// Remove existing fontsettings buttons
|
|
||||||
if (!!BUTTON_ID) {
|
|
||||||
gitbook.toolbar.removeButton(BUTTON_ID);
|
|
||||||
}
|
|
||||||
|
|
||||||
// Create buttons in toolbar
|
|
||||||
BUTTON_ID = gitbook.toolbar.createButton({
|
|
||||||
icon: 'fa fa-font',
|
|
||||||
label: 'Font Settings',
|
|
||||||
className: 'font-settings',
|
|
||||||
dropdown: [
|
|
||||||
[
|
|
||||||
{
|
|
||||||
text: 'A',
|
|
||||||
className: 'font-reduce',
|
|
||||||
onClick: reduceFontSize
|
|
||||||
},
|
|
||||||
{
|
|
||||||
text: 'A',
|
|
||||||
className: 'font-enlarge',
|
|
||||||
onClick: enlargeFontSize
|
|
||||||
}
|
|
||||||
],
|
|
||||||
$.map(FAMILIES, function(family) {
|
|
||||||
family.onClick = function(e) {
|
|
||||||
return changeFontFamily(family.config, e);
|
|
||||||
};
|
|
||||||
|
|
||||||
return family;
|
|
||||||
}),
|
|
||||||
$.map(THEMES, function(theme) {
|
|
||||||
theme.onClick = function(e) {
|
|
||||||
return changeColorTheme(theme.config, e);
|
|
||||||
};
|
|
||||||
|
|
||||||
return theme;
|
|
||||||
})
|
|
||||||
]
|
|
||||||
});
|
|
||||||
}
|
|
||||||
|
|
||||||
// Init configuration at start
|
|
||||||
gitbook.events.bind('start', function(e, config) {
|
|
||||||
var opts = config.fontsettings;
|
|
||||||
|
|
||||||
// Generate buttons at start
|
|
||||||
updateButtons();
|
|
||||||
|
|
||||||
// Init current settings
|
|
||||||
init(opts);
|
|
||||||
});
|
|
||||||
|
|
||||||
// Expose API
|
|
||||||
gitbook.fontsettings = {
|
|
||||||
enlargeFontSize: enlargeFontSize,
|
|
||||||
reduceFontSize: reduceFontSize,
|
|
||||||
setTheme: changeColorTheme,
|
|
||||||
setFamily: changeFontFamily,
|
|
||||||
getThemes: getThemes,
|
|
||||||
setThemes: setThemes,
|
|
||||||
getFamilies: getFamilies,
|
|
||||||
setFamilies: setFamilies
|
|
||||||
};
|
|
||||||
});
|
|
||||||
|
|
||||||
|
|
||||||
@@ -1,135 +0,0 @@
|
|||||||
pre,
|
|
||||||
code {
|
|
||||||
/* http://jmblog.github.io/color-themes-for-highlightjs */
|
|
||||||
/* Tomorrow Comment */
|
|
||||||
/* Tomorrow Red */
|
|
||||||
/* Tomorrow Orange */
|
|
||||||
/* Tomorrow Yellow */
|
|
||||||
/* Tomorrow Green */
|
|
||||||
/* Tomorrow Aqua */
|
|
||||||
/* Tomorrow Blue */
|
|
||||||
/* Tomorrow Purple */
|
|
||||||
}
|
|
||||||
pre .hljs-comment,
|
|
||||||
code .hljs-comment,
|
|
||||||
pre .hljs-title,
|
|
||||||
code .hljs-title {
|
|
||||||
color: #8e908c;
|
|
||||||
}
|
|
||||||
pre .hljs-variable,
|
|
||||||
code .hljs-variable,
|
|
||||||
pre .hljs-attribute,
|
|
||||||
code .hljs-attribute,
|
|
||||||
pre .hljs-tag,
|
|
||||||
code .hljs-tag,
|
|
||||||
pre .hljs-regexp,
|
|
||||||
code .hljs-regexp,
|
|
||||||
pre .hljs-deletion,
|
|
||||||
code .hljs-deletion,
|
|
||||||
pre .ruby .hljs-constant,
|
|
||||||
code .ruby .hljs-constant,
|
|
||||||
pre .xml .hljs-tag .hljs-title,
|
|
||||||
code .xml .hljs-tag .hljs-title,
|
|
||||||
pre .xml .hljs-pi,
|
|
||||||
code .xml .hljs-pi,
|
|
||||||
pre .xml .hljs-doctype,
|
|
||||||
code .xml .hljs-doctype,
|
|
||||||
pre .html .hljs-doctype,
|
|
||||||
code .html .hljs-doctype,
|
|
||||||
pre .css .hljs-id,
|
|
||||||
code .css .hljs-id,
|
|
||||||
pre .css .hljs-class,
|
|
||||||
code .css .hljs-class,
|
|
||||||
pre .css .hljs-pseudo,
|
|
||||||
code .css .hljs-pseudo {
|
|
||||||
color: #c82829;
|
|
||||||
}
|
|
||||||
pre .hljs-number,
|
|
||||||
code .hljs-number,
|
|
||||||
pre .hljs-preprocessor,
|
|
||||||
code .hljs-preprocessor,
|
|
||||||
pre .hljs-pragma,
|
|
||||||
code .hljs-pragma,
|
|
||||||
pre .hljs-built_in,
|
|
||||||
code .hljs-built_in,
|
|
||||||
pre .hljs-literal,
|
|
||||||
code .hljs-literal,
|
|
||||||
pre .hljs-params,
|
|
||||||
code .hljs-params,
|
|
||||||
pre .hljs-constant,
|
|
||||||
code .hljs-constant {
|
|
||||||
color: #f5871f;
|
|
||||||
}
|
|
||||||
pre .ruby .hljs-class .hljs-title,
|
|
||||||
code .ruby .hljs-class .hljs-title,
|
|
||||||
pre .css .hljs-rules .hljs-attribute,
|
|
||||||
code .css .hljs-rules .hljs-attribute {
|
|
||||||
color: #eab700;
|
|
||||||
}
|
|
||||||
pre .hljs-string,
|
|
||||||
code .hljs-string,
|
|
||||||
pre .hljs-value,
|
|
||||||
code .hljs-value,
|
|
||||||
pre .hljs-inheritance,
|
|
||||||
code .hljs-inheritance,
|
|
||||||
pre .hljs-header,
|
|
||||||
code .hljs-header,
|
|
||||||
pre .hljs-addition,
|
|
||||||
code .hljs-addition,
|
|
||||||
pre .ruby .hljs-symbol,
|
|
||||||
code .ruby .hljs-symbol,
|
|
||||||
pre .xml .hljs-cdata,
|
|
||||||
code .xml .hljs-cdata {
|
|
||||||
color: #718c00;
|
|
||||||
}
|
|
||||||
pre .css .hljs-hexcolor,
|
|
||||||
code .css .hljs-hexcolor {
|
|
||||||
color: #3e999f;
|
|
||||||
}
|
|
||||||
pre .hljs-function,
|
|
||||||
code .hljs-function,
|
|
||||||
pre .python .hljs-decorator,
|
|
||||||
code .python .hljs-decorator,
|
|
||||||
pre .python .hljs-title,
|
|
||||||
code .python .hljs-title,
|
|
||||||
pre .ruby .hljs-function .hljs-title,
|
|
||||||
code .ruby .hljs-function .hljs-title,
|
|
||||||
pre .ruby .hljs-title .hljs-keyword,
|
|
||||||
code .ruby .hljs-title .hljs-keyword,
|
|
||||||
pre .perl .hljs-sub,
|
|
||||||
code .perl .hljs-sub,
|
|
||||||
pre .javascript .hljs-title,
|
|
||||||
code .javascript .hljs-title,
|
|
||||||
pre .coffeescript .hljs-title,
|
|
||||||
code .coffeescript .hljs-title {
|
|
||||||
color: #4271ae;
|
|
||||||
}
|
|
||||||
pre .hljs-keyword,
|
|
||||||
code .hljs-keyword,
|
|
||||||
pre .javascript .hljs-function,
|
|
||||||
code .javascript .hljs-function {
|
|
||||||
color: #8959a8;
|
|
||||||
}
|
|
||||||
pre .hljs,
|
|
||||||
code .hljs {
|
|
||||||
display: block;
|
|
||||||
background: white;
|
|
||||||
color: #4d4d4c;
|
|
||||||
padding: 0.5em;
|
|
||||||
}
|
|
||||||
pre .coffeescript .javascript,
|
|
||||||
code .coffeescript .javascript,
|
|
||||||
pre .javascript .xml,
|
|
||||||
code .javascript .xml,
|
|
||||||
pre .tex .hljs-formula,
|
|
||||||
code .tex .hljs-formula,
|
|
||||||
pre .xml .javascript,
|
|
||||||
code .xml .javascript,
|
|
||||||
pre .xml .vbscript,
|
|
||||||
code .xml .vbscript,
|
|
||||||
pre .xml .css,
|
|
||||||
code .xml .css,
|
|
||||||
pre .xml .hljs-cdata,
|
|
||||||
code .xml .hljs-cdata {
|
|
||||||
opacity: 0.5;
|
|
||||||
}
|
|
||||||
File diff suppressed because one or more lines are too long
File diff suppressed because one or more lines are too long
@@ -1,90 +0,0 @@
|
|||||||
require(['gitbook', 'jquery'], function(gitbook, $) {
|
|
||||||
var SITES = {
|
|
||||||
'facebook': {
|
|
||||||
'label': 'Facebook',
|
|
||||||
'icon': 'fa fa-facebook',
|
|
||||||
'onClick': function(e) {
|
|
||||||
e.preventDefault();
|
|
||||||
window.open('http://www.facebook.com/sharer/sharer.php?s=100&p[url]='+encodeURIComponent(location.href));
|
|
||||||
}
|
|
||||||
},
|
|
||||||
'twitter': {
|
|
||||||
'label': 'Twitter',
|
|
||||||
'icon': 'fa fa-twitter',
|
|
||||||
'onClick': function(e) {
|
|
||||||
e.preventDefault();
|
|
||||||
window.open('http://twitter.com/home?status='+encodeURIComponent(document.title+' '+location.href));
|
|
||||||
}
|
|
||||||
},
|
|
||||||
'google': {
|
|
||||||
'label': 'Google+',
|
|
||||||
'icon': 'fa fa-google-plus',
|
|
||||||
'onClick': function(e) {
|
|
||||||
e.preventDefault();
|
|
||||||
window.open('https://plus.google.com/share?url='+encodeURIComponent(location.href));
|
|
||||||
}
|
|
||||||
},
|
|
||||||
'weibo': {
|
|
||||||
'label': 'Weibo',
|
|
||||||
'icon': 'fa fa-weibo',
|
|
||||||
'onClick': function(e) {
|
|
||||||
e.preventDefault();
|
|
||||||
window.open('http://service.weibo.com/share/share.php?content=utf-8&url='+encodeURIComponent(location.href)+'&title='+encodeURIComponent(document.title));
|
|
||||||
}
|
|
||||||
},
|
|
||||||
'instapaper': {
|
|
||||||
'label': 'Instapaper',
|
|
||||||
'icon': 'fa fa-instapaper',
|
|
||||||
'onClick': function(e) {
|
|
||||||
e.preventDefault();
|
|
||||||
window.open('http://www.instapaper.com/text?u='+encodeURIComponent(location.href));
|
|
||||||
}
|
|
||||||
},
|
|
||||||
'vk': {
|
|
||||||
'label': 'VK',
|
|
||||||
'icon': 'fa fa-vk',
|
|
||||||
'onClick': function(e) {
|
|
||||||
e.preventDefault();
|
|
||||||
window.open('http://vkontakte.ru/share.php?url='+encodeURIComponent(location.href));
|
|
||||||
}
|
|
||||||
}
|
|
||||||
};
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
gitbook.events.bind('start', function(e, config) {
|
|
||||||
var opts = config.sharing;
|
|
||||||
|
|
||||||
// Create dropdown menu
|
|
||||||
var menu = $.map(opts.all, function(id) {
|
|
||||||
var site = SITES[id];
|
|
||||||
|
|
||||||
return {
|
|
||||||
text: site.label,
|
|
||||||
onClick: site.onClick
|
|
||||||
};
|
|
||||||
});
|
|
||||||
|
|
||||||
// Create main button with dropdown
|
|
||||||
if (menu.length > 0) {
|
|
||||||
gitbook.toolbar.createButton({
|
|
||||||
icon: 'fa fa-share-alt',
|
|
||||||
label: 'Share',
|
|
||||||
position: 'right',
|
|
||||||
dropdown: [menu]
|
|
||||||
});
|
|
||||||
}
|
|
||||||
|
|
||||||
// Direct actions to share
|
|
||||||
$.each(SITES, function(sideId, site) {
|
|
||||||
if (!opts[sideId]) return;
|
|
||||||
|
|
||||||
gitbook.toolbar.createButton({
|
|
||||||
icon: site.icon,
|
|
||||||
label: site.text,
|
|
||||||
position: 'right',
|
|
||||||
onClick: site.onClick
|
|
||||||
});
|
|
||||||
});
|
|
||||||
});
|
|
||||||
});
|
|
||||||
Binary file not shown.
|
Before Width: | Height: | Size: 4.7 KiB |
@@ -548,7 +548,7 @@ MONGO_DB = <span class="hljs-string">'crawlab_test'</span>
|
|||||||
<script>
|
<script>
|
||||||
var gitbook = gitbook || [];
|
var gitbook = gitbook || [];
|
||||||
gitbook.push(function() {
|
gitbook.push(function() {
|
||||||
gitbook.page.hasChanged({"page":{"title":"简介","level":"1.1","depth":1,"next":{"title":"快速开始","level":"1.2","depth":1,"path":"QuickStart/README.md","ref":"QuickStart/README.md","articles":[{"title":"安装","level":"1.2.1","depth":2,"path":"QuickStart/Installation.md","ref":"QuickStart/Installation.md","articles":[]},{"title":"运行","level":"1.2.2","depth":2,"path":"QuickStart/Run.md","ref":"QuickStart/Run.md","articles":[]}]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":[],"pluginsConfig":{"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"README.md","mtime":"2019-03-28T11:44:15.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-03-28T12:07:05.349Z"},"basePath":".","book":{"language":""}});
|
gitbook.page.hasChanged({"page":{"title":"简介","level":"1.1","depth":1,"next":{"title":"快速开始","level":"1.2","depth":1,"path":"QuickStart/README.md","ref":"QuickStart/README.md","articles":[{"title":"安装","level":"1.2.1","depth":2,"path":"QuickStart/Installation.md","ref":"QuickStart/Installation.md","articles":[]},{"title":"运行","level":"1.2.2","depth":2,"path":"QuickStart/Run.md","ref":"QuickStart/Run.md","articles":[]}]},"dir":"ltr"},"config":{"gitbook":"*","theme":"default","variables":{},"plugins":["livereload"],"pluginsConfig":{"livereload":{},"highlight":{},"search":{},"lunr":{"maxIndexSize":1000000,"ignoreSpecialCharacters":false},"sharing":{"facebook":true,"twitter":true,"google":false,"weibo":false,"instapaper":false,"vk":false,"all":["facebook","google","twitter","weibo","instapaper"]},"fontsettings":{"theme":"white","family":"sans","size":2},"theme-default":{"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"},"showLevel":false}},"structure":{"langs":"LANGS.md","readme":"README.md","glossary":"GLOSSARY.md","summary":"SUMMARY.md"},"pdf":{"pageNumbers":true,"fontSize":12,"fontFamily":"Arial","paperSize":"a4","chapterMark":"pagebreak","pageBreaksBefore":"/","margin":{"right":62,"left":62,"top":56,"bottom":56}},"styles":{"website":"styles/website.css","pdf":"styles/pdf.css","epub":"styles/epub.css","mobi":"styles/mobi.css","ebook":"styles/ebook.css","print":"styles/print.css"}},"file":{"path":"README.md","mtime":"2019-03-28T11:44:15.000Z","type":"markdown"},"gitbook":{"version":"3.2.3","time":"2019-05-16T11:37:08.921Z"},"basePath":".","book":{"language":""}});
|
||||||
});
|
});
|
||||||
</script>
|
</script>
|
||||||
</div>
|
</div>
|
||||||
@@ -558,6 +558,10 @@ MONGO_DB = <span class="hljs-string">'crawlab_test'</span>
|
|||||||
<script src="gitbook/theme.js"></script>
|
<script src="gitbook/theme.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
<script src="gitbook/gitbook-plugin-livereload/plugin.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
<script src="gitbook/gitbook-plugin-search/search-engine.js"></script>
|
<script src="gitbook/gitbook-plugin-search/search-engine.js"></script>
|
||||||
|
|
||||||
|
|
||||||
|
|||||||
Binary file not shown.
|
Before Width: | Height: | Size: 90 KiB |
@@ -1,27 +0,0 @@
|
|||||||
import request from '@/utils/request'
|
|
||||||
|
|
||||||
export function login (username, password) {
|
|
||||||
return request({
|
|
||||||
url: '/user/login',
|
|
||||||
method: 'post',
|
|
||||||
data: {
|
|
||||||
username,
|
|
||||||
password
|
|
||||||
}
|
|
||||||
})
|
|
||||||
}
|
|
||||||
|
|
||||||
export function getInfo (token) {
|
|
||||||
return request({
|
|
||||||
url: '/user/info',
|
|
||||||
method: 'get',
|
|
||||||
params: { token }
|
|
||||||
})
|
|
||||||
}
|
|
||||||
|
|
||||||
export function logout () {
|
|
||||||
return request({
|
|
||||||
url: '/user/logout',
|
|
||||||
method: 'post'
|
|
||||||
})
|
|
||||||
}
|
|
||||||
@@ -1,9 +0,0 @@
|
|||||||
import request from '@/utils/request'
|
|
||||||
|
|
||||||
export function getList (params) {
|
|
||||||
return request({
|
|
||||||
url: '/table/list',
|
|
||||||
method: 'get',
|
|
||||||
params
|
|
||||||
})
|
|
||||||
}
|
|
||||||
@@ -1,7 +1,7 @@
|
|||||||
import Vue from 'vue'
|
import Vue from 'vue'
|
||||||
import Vuex from 'vuex'
|
import Vuex from 'vuex'
|
||||||
import app from './modules/app'
|
import app from './modules/app'
|
||||||
import user from './modules/user'
|
// import user from './modules/user'
|
||||||
import tagsView from './modules/tagsView'
|
import tagsView from './modules/tagsView'
|
||||||
import dialogView from './modules/dialogView'
|
import dialogView from './modules/dialogView'
|
||||||
import node from './modules/node'
|
import node from './modules/node'
|
||||||
@@ -19,7 +19,7 @@ Vue.use(Vuex)
|
|||||||
const store = new Vuex.Store({
|
const store = new Vuex.Store({
|
||||||
modules: {
|
modules: {
|
||||||
app,
|
app,
|
||||||
user,
|
// user,
|
||||||
tagsView,
|
tagsView,
|
||||||
dialogView,
|
dialogView,
|
||||||
node,
|
node,
|
||||||
|
|||||||
76
spiders/sites_inspector/sites_inspector.py
Normal file
76
spiders/sites_inspector/sites_inspector.py
Normal file
@@ -0,0 +1,76 @@
|
|||||||
|
import asyncio
|
||||||
|
import os
|
||||||
|
from datetime import datetime
|
||||||
|
|
||||||
|
import aiohttp
|
||||||
|
import requests
|
||||||
|
|
||||||
|
from pymongo import MongoClient
|
||||||
|
|
||||||
|
# MONGO_HOST = os.environ['MONGO_HOST']
|
||||||
|
# MONGO_PORT = int(os.environ['MONGO_PORT'])
|
||||||
|
# MONGO_DB = os.environ['MONGO_DB']
|
||||||
|
MONGO_HOST = 'localhost'
|
||||||
|
MONGO_PORT = 27017
|
||||||
|
MONGO_DB = 'crawlab_test'
|
||||||
|
|
||||||
|
mongo = MongoClient(host=MONGO_HOST, port=MONGO_PORT)
|
||||||
|
db = mongo[MONGO_DB]
|
||||||
|
col = db['sites']
|
||||||
|
|
||||||
|
|
||||||
|
async def process_response(resp, **kwargs):
|
||||||
|
url = kwargs.get('url')
|
||||||
|
status = resp.status # 读取状态
|
||||||
|
if status == 200:
|
||||||
|
col.update({'_id': url}, {'$set': {'has_robots': True}})
|
||||||
|
else:
|
||||||
|
# 错误状态
|
||||||
|
col.update({'_id': url}, {'$set': {'has_robots': False}})
|
||||||
|
|
||||||
|
|
||||||
|
async def process_home_page_response(resp, **kwargs):
|
||||||
|
url = kwargs.get('url')
|
||||||
|
duration = kwargs.get('duration')
|
||||||
|
status = resp.status # 读取状态
|
||||||
|
col.update({'_id': url}, {'$set': {'home_http_status': status, 'home_response_time': duration}})
|
||||||
|
|
||||||
|
|
||||||
|
async def request_site(url: str, semaphore):
|
||||||
|
_url = 'http://' + url + '/robots.txt'
|
||||||
|
print('crawling ' + _url)
|
||||||
|
async with semaphore:
|
||||||
|
async with aiohttp.ClientSession() as session: # <1> 开启一个会话
|
||||||
|
async with session.get(_url) as resp: # 发送请求
|
||||||
|
await process_response(resp=resp, url=url)
|
||||||
|
print('crawled ' + _url)
|
||||||
|
# resp = requests.get(_url)
|
||||||
|
return resp
|
||||||
|
|
||||||
|
|
||||||
|
async def request_site_home_page(url: str, semophore):
|
||||||
|
_url = 'http://' + url
|
||||||
|
print('crawling ' + _url)
|
||||||
|
async with semophore:
|
||||||
|
tic = datetime.now()
|
||||||
|
async with aiohttp.ClientSession() as session: # <1> 开启一个会话
|
||||||
|
async with session.get(_url) as resp: # 发送请求
|
||||||
|
toc = datetime.now()
|
||||||
|
duration = (toc - tic).total_seconds()
|
||||||
|
await process_home_page_response(resp=resp, url=url, duration=duration)
|
||||||
|
print('crawled ' + _url)
|
||||||
|
|
||||||
|
|
||||||
|
async def run():
|
||||||
|
semaphore = asyncio.Semaphore(50) # 限制并发量为50
|
||||||
|
sites = [site for site in col.find({'rank': {'$lte': 5000}})]
|
||||||
|
urls = [site['_id'] for site in sites]
|
||||||
|
to_get = [request_site(url, semaphore) for url in urls]
|
||||||
|
to_get += [request_site_home_page(url, semaphore) for url in urls]
|
||||||
|
await asyncio.wait(to_get)
|
||||||
|
|
||||||
|
|
||||||
|
if __name__ == '__main__':
|
||||||
|
loop = asyncio.get_event_loop()
|
||||||
|
loop.run_until_complete(run())
|
||||||
|
loop.close()
|
||||||
Reference in New Issue
Block a user