xpath寻找网页内容与正则寻找网页内容对比

import re
import requests
import ua_info
import random
from lxml import etree


url = 'https://movie.douban.com/chart'
html = requests.get(url=url, headers={'User-Agent': random.choice(ua_info.ua_list)}).text
tree=etree.HTML(html)

#xpath寻找电影类型 #搜索针对的是页面对象解析为字符串后再解析为树节点
type_li= tree.xpath('//div[@class="types"]/span/a/@href')
print(type_li)

#正则寻找电影类型
#创建正则对象
pattern=re.compile('/typerank\?type_name=.*?&type=\d*?&interval_id=100:90&action=')
#搜索匹配正则表达式要求的字符串 #搜索范围为当前页面解析为字符串后
str_li = pattern.findall(html)
print(str_li)
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值