爬取QQ音乐MV

最新推荐文章于 2021-07-28 11:57:47 发布

丹尼尔•卡尼�

最新推荐文章于 2021-07-28 11:57:47 发布

阅读量517

点赞数

分类专栏：实用

本文链接：https://blog.csdn.net/qq_51598376/article/details/115400203

版权

本文详细介绍了如何使用Python爬虫技术抓取QQ音乐平台上的MV数据，包括视频链接、歌曲信息等，涉及网络请求、解析HTML和数据存储等关键步骤。

摘要由CSDN通过智能技术生成

#获取MV链接
import requests
from lxml import etree
from selenium import webdriver
import time
import re
import os
from you_get import common

headers =  headers = {
        "User-Agent": "Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/89.0.4389.90 Safari/537.36"}

def get_url(url):
    # res = requests.get(url,headers).text
    # html = etree.HTML(res)
    # # link_list = html.xpath("//")
    # # print(link_list)
    driver = webdriver.Chrome(executable_path=r"C:\Users\admin\PycharmProjects\pythonProject\venv\Scripts\chromedriver.exe")  # 用webdrive进行爬取
    driver.get(url)
    time.sleep(3)
    # driver.switch_to.frame('contentFrame')
    content = driver.find_elements_by_xpath("//li//a[@title='MV']")
    name =  driver.find_elements_by_xpath("//li//a[@title='MV']")
    for h in content:
        print(h.get_attribute("