requests获取保存网页代码

本文介绍了如何使用Python的requests库获取网页源代码并存储到本地文件中。通过示例代码详细解释了请求网页、处理编码问题以及如何将内容写入文件。此外,还展示了如何读取和保存文件,以及如何循环获取多页内容。
摘要由CSDN通过智能技术生成

Python,分享一些初学者的心得与君共勉。
内容主要是如何使用python去获取网页的源代码并存储到本地文件中
先上代码:

import requests

def gethtml(url):
    req=requests.get(url)
    html=req.text
    print(html)
url = 'http://www.youku.com'
gethtml(url)

第1行导入了必要的模块
第2至5行定义了一个函数,目的是向指定url发送http请求,并将网页的源代码返回
最后把获得的源码进行展示

而在浏览的网页的空白处单击右键,选择“查看网页源代码”,可以看到的html源码,实际上是一样的。

修改一下代码,将获取的html源码写入本地的文件。
方法一:

import requests
def getUrl
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值