Python:提取网页数据

最新推荐文章于 2024-05-27 08:52:59 发布

Abvedu

最新推荐文章于 2024-05-27 08:52:59 发布

阅读量2.2k

点赞数

分类专栏： Python 文章标签： Python requests http协议

本文链接：https://blog.csdn.net/abvedu/article/details/54835699

版权

本文介绍如何使用Python的requests模块提取网页数据。在使用前，需通过pip安装requests。示例代码展示了基本的网页数据获取流程。

摘要由CSDN通过智能技术生成

要把网页的内容提取到程序中，以便处理，只要通过模块requests就可以了。requests模块不是Python的默认模块，所以在使用它之前，需要在系统中执行安装"pip install requests"才可以导入到程序中。

示例：

import requests
url = 'http://www.moe.gov.cn/jyb_xxgk/'
#url='http://zfxxgk.ndrc.gov.cn/PublicGuideList.aspx'
src = requests.get(url)
src.encoding = 'utf-8'
#src.encoding = 'bgk'
html = src.text.splitlines()

for i in range(0,20):
    print(html[i])

执行结果：

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd">
<html xmlns&#

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

Abvedu

关注关注

0
点赞
踩
3

收藏

觉得还不错? 一键收藏
0
评论
Python:提取网页数据

要把网页的内容提取到程序中，以便处理，只要通过模块requests就可以了。requests模块不是Python的默认模块，所以在使用它之前，需要在系统中执行安装"pip install requests"才可以导入到程序中。示例：import requestsurl = 'http://www.moe.gov.cn/jyb_xxgk/'#url='http://zfxxgk.ndrc
复制链接

扫一扫