
Scrapyd部署scrapy爬虫, Scrapyd部署, Scrapyd经验。
1、sudo pip install scrapyd
2、sudo pip install scrapyd-client
3、切换目录到项目所在路径:
修改scrapy.cfg设置
[deploy:xxxx]
url = http://192.168.2.239:6800
project = xxxspider
发布工程到scrapyd
scrapyd-deploy xxxx -p xxxspider --version 54(version为版本号,可以方便控制爬虫版本)
Packing version 1470208884
Deploying to pro...