selenium爬取网易云歌曲“爱如火”前十页评论

from selenium import webdriver
import time
import re
path = 'chromedriver.exe'
browser = webdriver.Chrome(path)
browser.get('https://music.163.com/#/song?id=1999552137')
time.sleep(1)


for i in range(10):
    time.sleep(3)
    browser.switch_to.frame(0)
    lis = browser.find_elements_by_css_selector('.itm')
    for li in lis:
        content = li.find_element_by_css_selector('.cnt').text
        comment = re.findall(':(.*)',content)[0]
        with open('评论.text',mode='a',encoding='utf-8') as f:
            f.write(comment)
            f.write('\n')
        time.sleep(3)
        js = 'document.documentElement.scrollTop = document.documentElement.scrollHeight'
        browser.execute_script(js)
        browser.find_element_by_css_selector('.znxt').click()
        browser.switch_to.window(browser.window_handles[-1])

总结:

1.这里用到了转换到iframe和转换到新的页面的知识

2.用了下滑到底部的js代码执行

3.留下疑问

这样子的格式,为什么css选择器用的是.znxt呢?

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

努力学习各种软件

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值