用python写网络爬虫
文章平均质量分 96
爱吃白饭
在校数学系大学生,长期更新数学相关知识整理,偶尔凭兴趣更新一些计算机的学习内容。已经发布的内容会随时更新,目前主要更新的专栏有:数学分析,高等代数,数值分析,数值代数,信号处理等
展开
-
用python写网络爬虫:3.urllib库进一步的使用方法
已经介绍了如何使用urllib库的requests模块发送简单的请求,如果想方便地实现更多东西,还得学习新的东西。原创 2024-03-17 14:15:22 · 1793 阅读 · 1 评论 -
用python写网络爬虫:2.urllib库的基本用法
一般使用request模块中的urlopen()命令以发送请求,由于现在许多网站的服务器发送的响应都是经过压缩的,所以需要进行将响应进行解压缩的处理。利用上述最基本urlopen()方法,可以完成最基本的get请求,下面演示用urlopen可选的参数去完成更多的事情。这里我们传递了一个参数word,其值为hello,从输出结果中可以发现我们传递的参数出现在了form字段中。urllib是python中一个最基础的HTTP库,一般是内置的,不需要额外下载。《python3 网络爬虫开发实战》崔庆才著。原创 2024-03-14 11:09:14 · 1681 阅读 · 0 评论 -
用python写网络爬虫:1.基础知识
本人非计算机专业,在空闲时总想学点有用的网络知识。由于完全出于兴趣,也就没什么规划,学到哪儿算哪儿吧。学习的时候不由感叹:计算机的术语真是铺天盖地。我习惯的理解方式是通俗化的,总结了一些经验记录在这里,还望各位批评指正。原创 2024-03-10 11:49:13 · 1466 阅读 · 0 评论