Python实现简单的爬虫

#导入python的爬虫包
import urllib.request

#向指定的url地址发起请求,并返回服务器响应的数据(文件的对象)
response = urllib.request.urlopen("http://www.baidu.com")

#读取接收的数据
data = response.read()

print(data)

#将读取到的数据写入dd盘file.html文件中
with open(r"D:\file.html", "wb") as f:
    f.write(data)

python做简单爬虫的基本思路:

1.构建请求头(headers)

2.构建请求体(req)

3.发起请求(urlopen)

4.读取响应数据(read)