bs获取p标签下的i标签

最新推荐文章于 2022-08-11 16:28:03 发布
最新推荐文章于 2022-08-11 16:28:03 发布
阅读量151 收藏
点赞数
分类专栏： 爬虫
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_51679796/article/details/115498958
版权

Python BeautifulSoup 网页抓取 数据解析 粉丝数
关键词由CSDN通过智能技术生成

fensb=bs.find(‘p’,class_=“num-followers”)
fens=fensb.find(‘i’).text
老傅第三代弟子
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
p标签的使用
join
07-10 2673
在html中p标签里只可以放置文本，图片和表单，当前其他的也可以放，但是不规范。 p标签的使用 以上是在html 编辑器中写的代码，这不符合标准的规范，当然，效果是可以显示出来的 从图中可以看出，编辑器中的代码和浏览器上审查元素所显示出来的代码是不一样的.... 所以说代码一定要看规范来，说不定以后会出现什么问题(自己的代码都很不规范，共勉吧！)
爬虫提取标签的几种方式
chang995196962的博客
10-25 8888
我最喜欢用两种解析方式 #第一种解析方式 etree+xpath 提取匹配标签 a = "<div class='a'>123<p>1455555</p></div>" from lxml import e
如何找一个div标签下面所有p标签的内容
m0_48600544的博客
08-11 2564
如何找一个div标签下面所有p标签的内容
HTML提取所有div标签下的所有<p>及<p>下子标签的内容
xiaotian127的博客
12-19 1万+
示例代码如下： &lt;div&gt; &lt;p&gt;123154872313&lt;/p&gt; &lt;p&gt;test &lt;em&gt;http://baidu.com&lt;/em&gt; &lt;/p&gt; &lt;/div&gt; p标签下的内容一般是网页文本内容，文本中的会再插入一些标签，最难的应该是em标签（这类标签一般提取不出来），所以在使用et
python提取p标签的文本,Python3.5 BeautifulSoup4从div中的'p'获取文本
weixin_34336068的博客
12-16 1082
I am trying to pull all the text from the div class 'caselawcontent searchable-content'. This code just prints the HTML without the text from the web page. What am I missing to get the text?import req...
python取第一个子标签_37-python中bs4获取的标签中如何提取子标签
weixin_42302872的博客
03-02 1023
如果只是要提取一个标签 里面的属性值啥的，直接看这篇文章就可以了：如果是标签的嵌套，可以参考下面的思路，虽然不是很简洁，但是可以解决你的问题： 可以看到不能直接 findAll 所有的 tr 标签，否则会有许多杂质的， 所以，可以知道 table, 根据id 或者class, 则可以唯一找到；下面的重点就是如何分析出我们想要的数据，如何提取出 每个 tr 包含的一行数据呢？我的思路是：findAL...
html 获取标签name属性的值,Python HTML解析,获取标签名称及其值
weixin_33168819的博客
06-04 1503
使用.text或.string属性获取元素的文本内容.使用.get(‘attrname’)或[‘attrname’]来获取属性值.html = ''' This is title'''from bs4 import BeautifulSoupsoup = BeautifulSoup(html)print('name={} value={}'.format('title', soup.title.t...
python抓取p标签里的数据_Python BeautifulSoup从html文件p标签中提取内容，该标签位于组div标签中。我正在打印空白...
weixin_39759107的博客
12-05 872
我想从我的Selenium测试报告html文件中提取一些数据。 我得到空白打印到PyCharm控制台。 我想从P标签中获取所有数据。它在一个div标签下。Python BeautifulSoup从html文件p标签中提取内容，该标签位于组div标签中。我正在打印空白的HTML片段是：Test ReportStart Time: 2016-08-12 11:57:33Duration: 0:48:0...
python3 BeautifulSoup模块使用字典的方法抓取a标签内的数据示例
09-18
如果`a`标签包含其他嵌套的标签，如`<b>`或`<i>`，并且你想获取这些标签内的纯文本，可以使用`get_text()`方法： ```python print(k.get_text()) ``` 在实际应用中，你可能需要处理各种复杂的HTML结构，例如处理...
Python爬虫入门8：BeautifulSoup获取html标签相关属性
老猿Python
01-30 3578
本节介绍了BeautifulSoup对象的主要属性，通过这些属性可以访问特定标签和内容。
18. `bs对象.节点名.next_sibling` previous_sibling 获取兄弟节点
weixin_63986098的博客
06-28 1129
获取兄弟节点
BeautifulSoup获取标签中包含的文字
热门推荐
ScapeD的博客
08-21 2万+
使用get_text()方法可以获取当前标签下的所有文字，包括其子标签的,该方法可自动剔除其余的修饰标签 若当前标签的子节点是文字，可使用.string获得其下的文本内容 BeautifulSoup将标签解析为xml，子节点看作父节点的属性值，可以以“parent.child”的方式访问...
openpyxl写入数据到指定列
qq_51679796的博客
04-07 4994
sheet.append({‘E’:sold,‘F’:fens})
爬速卖通新品
qq_51679796的博客
04-03 223
from selenium import webdriver # import time from selenium.webdriver.common.action_chains import ActionChains #行为链 from bs4 import BeautifulSoup import openpyxl wb=openpyxl.Workbook() #建工作簿 sheet=wb.active #建活动表 driver=webdriver.Chrome() #driver
制作最简单的词云图
qq_51679796的博客
03-15 142
from wordcloud import WordCloud with open('test.txt',encoding='utf-8') as file: # 1.读取文本内容 text=file.read() #设置词云的背景颜色,宽高,字数 wordcloud=WordCloud(background_color='green',width=600,height=300,max_words=50).generate(text) #3.生成图片 ima
后续跟进爬虫
qq_51679796的博客
04-07 102
#import requests import openpyxl from bs4 import BeautifulSoup from lxml import html import time from selenium import webdriver wb=openpyxl.load_workbook('4月3日6点速卖通.xlsx') sheet=wb['Sheet1'] col=sheet['A'] headers={'User-Agent':'Mozilla/5.0 (Windows NT 10.
from bs4 import BeautifulSoup import requests import time import pymysql conn = pymysql.connect(host='localhost', user='root', password='123456', charset='utf8') cursor = conn.cursor() cursor.execute('create database wyya;') cursor.execute('use wyya;') create_Tb = 'create table sj(地址 varchar(100),标题 varchar(100),播放量 varchar(50),作者 varchar(50));' cursor.execute(create_Tb) headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36' } for i in range(0, 1505, 35): print(i) time.sleep(2) url = 'https://music.163.com/discover/playlist/?cat=华语&order=hot&limit=35&offset=' + str(i)#修改这里即可 response = requests.get(url=url, headers=headers) html = response.text soup = BeautifulSoup(html, 'html.parser') # 获取包含歌单详情页网址的标签 ids = soup.select('.dec a') # 获取包含歌单索引页信息的标签 lis = soup.select('#m-pl-container li') print(len(lis)) for j in range(len(lis)): # 获取歌单详情页地址 url = ids[j]['href'] # 获取歌单标题 title = ids[j]['title'] # 获取歌单播放量 play = lis[j].select('.nb')[0].get_text() # 获取歌单贡献者名字 user = lis[j].select('p')[1].select('a')[0].get_text() # 输出歌单索引页信息 print(url, title, play, user) insert_Tb = 'insert into sj(地址,标题,播放量,作者) values(%s,%s,%s,%s);' val = (url, title, play, user) cursor.execute(insert_Tb, val) cursor.execute("select *from sj;") conn.commit(); data = cursor.fetchall() for bases in data: print(bases) conn.close()写出优化后的这段代码，使爬取到的所有数据全部存入数据库
最新发布
06-01
from bs4 import BeautifulSoup import requests import time import pymysql # 连接数据库 conn = pymysql.connect(host='localhost', user='root', password='123456', charset='utf8') cursor = conn.cursor() # 创建数据库和表 cursor.execute('create database if not exists wyya;') cursor.execute('use wyya;') create_Tb = 'create table if not exists sj(地址 varchar(100),标题 varchar(100),播放量 varchar(50),作者 varchar(50));' cursor.execute(create_Tb) # 设置请求头 headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36' } # 循环爬取歌单信息并存入数据库 for i in range(0, 1505, 35): print(i) time.sleep(2) url = 'https://music.163.com/discover/playlist/?cat=华语&order=hot&limit=35&offset=' + str(i) response = requests.get(url=url, headers=headers) html = response.text soup = BeautifulSoup(html, 'html.parser') ids = soup.select('.dec a') lis = soup.select('#m-pl-container li') print(len(lis)) for j in range(len(lis)): url = ids[j]['href'] title = ids[j]['title'] play = lis[j].select('.nb')[0].get_text() user = lis[j].select('p')[1].select('a')[0].get_text() print(url, title, play, user) # 将爬取到的信息插入数据库 insert_Tb = 'insert into sj(地址,标题,播放量,作者) values(%s,%s,%s,%s);' val = (url, title, play, user) cursor.execute(insert_Tb, val) # 查询并输出数据库中的数据 cursor.execute("select *from sj;") data = cursor.fetchall() for bases in data: print(bases) # 提交并关闭数据库连接 conn.commit() conn.close()
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值