实验1-Python数据采集与存储 文章目录 实验1-Python数据采集与存储 一、实验目的与要求 1、目的 2、要求 二、实验过程 1、观察所爬取网站的Robots协议的相关内容 2、网络爬虫抓取网页数据的一般处理过程 三、主要程序清单 四、程序运行结果 一、实验目的与要求 1、目的 理解抓取网页数据的一般处理过程;熟悉应用Chrome浏览器的工具分析网页的基本操作步骤;掌握使用Requests库获取静态网页的基本方法;掌握Beautiful Soup提取静态网页信息的主要技术。 理解网络数据采集的Robots协议的基本要求,能合规地进行网络数据采集。 2、要求 编写一个网络爬虫,爬取某个网站的信息并存