scrapyd部署

参考教程：http://blog.csdn.net/xiaoquantouer/article/details/53164306
项目需要把之前写的爬虫发布到天河超算中心上，于是学习了scrapyd部署，完全按照这个教程来的，在此仅列出需要注意的几点，供自己回顾和他人参考。
环境安装和验证安装成功都没有问题。
注意1：发布工程时需要另外打开一个命令行窗口，保持http://localhost:6800/是可以打开的。
注意2：scrapyd-deploy -l也需要在爬虫工程文件目录里运行。
注意3：修改scrapy.cfg文件时，

[deploy:scrapyd1]
url = http://localhost:6800/
project = baidu

如果不是部署到本地，url里面的localhost也要修改。
注意4：启动爬虫的时候，我报了个错：'curl' 不是内部或外部命令，也不是可运行的程序或批处理文件。原因是没有下载curl。
从网上搜了几个curl的zip文件，解压后发现并没有exe，于是从CSDN直接下了一个curl.exe文件放在两个工程文件的目录下。
注意5：启动爬虫后可以在log里查看运行日志，如果有报错的话可以根据日志改错。我报了两个错，一个是导入了一个没有用上的库，一个是数据库里表的名字和程序里大小写不对应，这两错在本地运行时均没有，改后爬虫成功。