python 解析html中的link

最新推荐文章于 2021-05-30 12:01:56 发布

24K纯净水

最新推荐文章于 2021-05-30 12:01:56 发布

阅读量2.1k

点赞数

分类专栏： python-学习手册

本文链接：https://blog.csdn.net/Lyq3413/article/details/76577465

版权

本文介绍了Python中解析HTML的方法，包括使用htmllib.HTMLParser和BeautifulSoup。HTMLParser是一个不处理I/O的parser，它与formatter对象配合工作。通常会配合(formatter.DumbWriter)写入输出，可以通过cStringIO吸收输出。而BeautifulSoup虽然需要单独安装，但提供了更方便的HTML解析功能。

摘要由CSDN通过智能技术生成

htmllib.HTMLParser

#!/usr/bin/env python
import cStringIO
import formatter
from htmllib import HTMLParser
import urllib

url = "http://blog.csdn.net/Lyq3413/article/details/76577465"
user_name = "proxy_account"
passwd = "proxy_pwd"
proxy_base = "proxy.example.net:8080"
proxy = "http://%s:%s@%s" % (user_name, passwd, proxy_base)
proxies = {
  "http": proxy, "https": proxy}
f = urllib.urlopen(url, proxies=proxies) #需要代理
#f = urllib.urlopen(