一.python的下载与配置
1.在python的官网选择合适的版本进行下载
2.在系统——系统信息——高级系统设置——环境变量中添加python
3.配置完成后可以通过命令提示符输入命令python查看是否配置成功
二.pycharm的下载与使用
1.在pycharm的官网选择合适的版本进行下载
2.新建一个项目并加载python环境
3.开始使用
三. 爬虫的基础测试
(1)爬取图片
如下图,依次通过代码完成添加图片地址——使用request的get请求加载图片——设置图片名和写入格式——以字节 / 二进制的方式写入文件几步完成爬取图片
成功后可以看见目录下有了图片文件
(二)豆瓣网参数传递
1.定制请求头:通过f12或右键——检查打开开发人员工具在网络界面找到请求标头
2.添加网址并拼接搜索功能最后定义传递参数
点击运行结果就可以进入到对应的网站了
(三)牛客热搜网多参数传递
多参数与单参数传递并无太大不同,只需在定义参数时添加参数即可;多个参数中间用“,”隔开