安装scrapy

最新推荐文章于 2017-08-24 15:05:22 发布

huaweitman

最新推荐文章于 2017-08-24 15:05:22 发布

阅读量1.8k

点赞数

分类专栏： python

本文链接：https://blog.csdn.net/huaweitman/article/details/9533617

版权

python 专栏收录该内容

97 篇文章 2 订阅

订阅专栏

本文介绍Scrapy的安装过程及使用easy_install命令的具体步骤，并汇总了解决Python.h、libxml/xmlversion.h和libxslt/xsltconfig.h等文件缺失问题的方法。完成这些配置后，可以顺利进行Scrapy项目的编译与运行。

摘要由CSDN通过智能技术生成

安装方式如下：
http://scrapy.org/download/

本文采用: easy_install -U Scrapy

会遇到三个致命的女人：

python 错误汇总1---解决 Python.h：没有那个文件或目录错误的方法

python 错误汇总2：致命错误： libxml/xmlversion.h：没有那个文件或目录

python错误汇总3：libxslt/xsltconfig.h：没有那个文件或目录

解决了之后，就可以完整编译了～ have fun.

运行一下scrapy:

Scrapy 0.16.5 - no active project

Usage:
scrapy <command> [options] [args]

Available commands:
fetch Fetch a URL using the Scrapy downloader
runspider Run a self-contained spider (without creating a project)
settings Get settings values
shell Interactive scraping console
startproject Create new project
version Print Scrapy version
view Open URL in browser, as seen by Scrapy

[ more ] More commands available when run from project directory

Use "scrapy <command> -h" to see more info about a command