Python爬虫——Scrapy框架

---

前言

Scrapy是一种功能强大的爬虫框架，任何人可以根据自己的需求很快的爬取到自己需要的内容。

---

提示：以下是本篇文章正文内容，下面案例可供参考

一、安装Scrapy框架？

操作简单，直接通过控制台执行指令：

pip install scrapy

安装完成后通过

scrapy-h

指令查看安装效果

二、Scrapy框架介绍

我们把它叫做一个爬虫框架而不是简单的函数功能库，那么什么是一个爬虫框架呢？

它是实现爬虫功能的一个软件结构和功能组件；
它相当于是一个半成品，用户可以利用它实现专业的网络爬虫。

三、Scrapy框架的“5+2”结构

1.引入库

代码如下（示例）：

import numpy as np
import pandas as pd
import matplotlib