python的基本使用及爬虫基础

一.python的下载与配置

1.在python的官网选择合适的版本进行下载

2.在系统——系统信息——高级系统设置——环境变量中添加python

3.配置完成后可以通过命令提示符输入命令python查看是否配置成功

二.pycharm的下载与使用

1.在pycharm的官网选择合适的版本进行下载

2.新建一个项目并加载python环境

3.开始使用

三. 爬虫的基础测试

(1)爬取图片

如下图,依次通过代码完成添加图片地址——使用request的get请求加载图片——设置图片名和写入格式——以字节 / 二进制的方式写入文件几步完成爬取图片

 

成功后可以看见目录下有了图片文件

(二)豆瓣网参数传递

1.定制请求头:通过f12或右键——检查打开开发人员工具在网络界面找到请求标头

2.添加网址并拼接搜索功能最后定义传递参数

点击运行结果就可以进入到对应的网站了 

(三)牛客热搜网多参数传递

多参数与单参数传递并无太大不同,只需在定义参数时添加参数即可;多个参数中间用“,”隔开

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值