python 大量网络请求_Python爬虫实现HTTP网络请求多种实现方式

1、通过urllib.requests模块实现发送请求并读取网页内容的简单示例如下：

#导入模块

import urllib.request

#打开需要爬取的网页

response = urllib.request.urlopen('http://www.baidu.com')

#读取网页代码

html = response.read()

#打印读取的内容

print(html)

结果：

b'\n\n\n \n \n

\xe7\x99\xbe\xe5\xba\xa6\xe4\xb8\x80\xe4\xb8\x8b\xef\xbc\x8c\xe4\xbd\xa0\xe5\xb0\xb1\xe7\x9f\xa5\xe9\x81\x93