python爬虫task3总结

IP代理

使用代理
proxies的格式是一个字典：
{‘http’: ‘http://IP:port‘,‘https’:'https://IP:port‘}
把它直接传入requests的get方法中即可
web_data = requests.get(url, headers=headers, proxies=proxies)

selenium

1.操作步骤

1、导入模块：
2、创建一个WebDriver实例：
3、打开一个页面:
4、关闭页面