网络爬虫
煎蛋lov
百因必有果
展开
-
爬虫基本原理讲解(二)
爬虫基本流程 爬虫的定义:请求网站并提取数据的自动化程序 1.发起请求 通过HTTP库向目标站点发起请求,即发送一个Request,请求可以包含额外的headers等信息,等待服务器相应 2.获取相应内容 若服务器能正常相应,会得到一个Response,response的内容便是所要获取的页面内容,类型可能有HTML,json字符串,二进制数据(图片视频)等类型 3.解析内容 HTML,可以用正...原创 2019-10-26 23:49:38 · 279 阅读 · 0 评论 -
网络爬虫第一天环境配置(一)记录出现的一些麻烦事
python3 安装python3 这个就不多说了网上有一大堆教程 [https://blog.csdn.net/qiang12qiang12/article/details/53239734] python安装教程 annocoda 如果你没有安装python3的 安装个anocoda3 这个也很好安装 [https://blog.csdn.net/DQ_DM/article/details/4...原创 2019-10-26 07:46:56 · 176 阅读 · 0 评论