菜鸟的爬行之旅一（Windows下搭建网络爬虫的环境）

在之前本人自己学习过一点python的基础知识，但是看到现在网络爬虫这么火，我也想尝试尝试。首先我们来搭建环境

我之前安装了anaconda3+pycharm,我推荐大家使用anaconda，因为它自带了许多模块和包，这样可以节省时间去一个

一个安装包。官网上都有，有需要的可以自己下载。

下面就是配置网络爬虫的环境：

1.我们需要安装Beautiful Soup

很多人不知道Beautiful Soup4是用来干啥的，下面我做一些简单介绍：

Beautiful Soup是一个可以从HTML或XML文件中提取数据的Python库.它能够通过你喜欢的转换器实现惯用的文档导航,

查找,修改文档的方式.Beautiful Soup会帮你节省数小时甚至数天的工作时间.

https://www.crummy.com/software/BeautifulSoup/bs4/download/4.6/这个网址可以下载Beautiful soup4

下载Beautiful soup4并且解压到python的安装目录

打开cmd编辑器，进入到beautifulsoup文件夹内

执行 setup.py build

然后执行 setup.py install

这样 Beautiful Soup模块就安装好了。

然后在dos环境中用pip list看看有没有lxml、requests库，如果有就可以了，如果没有自己下载安装。

在别人的博客中的一个小例子：（非常感谢这位朋友）

from bs4 import BeautifulSoup
import requests
url='https://www.taobao.com/'
wb_data=requests.get(url)
soup=BeautifulSoup(wb_data.text,'lxml')
print(soup)