《精通Python爬虫框架Scrapy》第3章 爬虫基础

第3章　爬虫基础

这是非常重要的一章，你可能会多次阅读本章，并且经常会在寻找解决方案时回到本章中。我们首先会介绍如何安装Scrapy，然后伴随若干示例及不同的实现，转向开发Scrapy爬虫的方法论。在开始之前，我们先来看一些重要的概念。

由于我们会快速进入有趣的代码部分，因此使用本书中代码片段的能力非常重要。当你看到如下内容时：

$ echo hello world
hello world

表示你在终端输入了echo hello word（忽略美元符号），接下来的一行或几行就是你在终端上面看到的输出。

我们将会混用“终端”、“控制台”和“命令行”这几个术语，它们在本书的背景下没有太大区别。请用Google搜索并找出如何启动你所使用的平台（Windows、OS X或其他）中的控制台。你也可以在附录A中找到详细的指引。

当你看到如下内容时：

>>> print 'hi'
hi

表示你在Python或Scrapy的shell提示符中输入了print 'hi'（忽略>>>）。同样地，接下来的一行或几行就是你在终端上