在将 Scrapy 代码部署到远程 Scrapyd 的时候,其第一步就是要将代码打包为 Egg 文件,其次需要将 Egg 文件上传到远程主机,这个过程如果我们用程序来实现是完全可以的,但是我们并不需要做这些工作,因为 Scrapyd-Client 已经为我们实现了这些功能。
下面我们就来来一下 Scrapyd-Client 的安装过程。
相关链接
- GitHub:https://github.com/scrapy/scrapyd-client
- PyPi:https://pypi.python.org/pypi/scrapyd-client
- 使用说明:https://github.com/scrapy/scrapyd-client#scrapyd-deploy
pip 安装
推荐使用 pip 安装,命令如下:
1 |
pip3 install scrapyd-client |
验证安装
安装成功后会有一个可用命令,叫做 scrapyd-deploy,即部署命令。
我们可以输入如下测试命令测试 Scrapyd-Client 是否安装成功:
1 |
scrapyd-deploy -h |
如果出现如图类似输出则证明 Scrapyd-Client 已经成功安装: