python爬取b站视频标题并自动创建文件

最新推荐文章于 2024-07-15 11:23:54 发布

NoneUnique

最新推荐文章于 2024-07-15 11:23:54 发布

阅读量1.9k

点赞数 2

分类专栏： Python 文章标签： Python 爬虫

本文链接：https://blog.csdn.net/NoneUnique/article/details/82826524

版权

本文介绍如何使用Python编程爬取B站（哔哩哔哩）的视频标题，并将这些信息自动化地存储到文件中，为数据收集和分析提供便利。

摘要由CSDN通过智能技术生成

import requests
import re
url = 'https://m.bilibili.com/video/av.html'
av = 'av'
header = {'User-Agent':'Mozilla/5.0 (Linux; Android 6.0; Nexus 5 Build/MRA58N) '
                       'AppleWebKit/537.36(KHTML, like Gecko) '
                       'Chrome/67.0.3396.99 Mobile Safari/537.36'}
#获取视频标题
def getVedioName(url,av):
    r = requests.get(url,headers=header).text #取得网站代码
    #a.*?b 匹配最短的，以a开始，以b结束的字符串。
    #如果把它应用于aabab的话，它会匹配aab（第一到第三个字符）和ab（第四到第五个字符）
    text = r'<div class="index.*?src-videoPage-multiP-part-">(.*?)</div>' #正则匹配
    text1 = re.findall(text, r)#获取得到的div的内容和p标签里的内容
    desktop_path = 'C:desktop/test/'
    for i in range(0,len(text1)):#条数
        #去掉数字\d
        if(i<9):str3 = re.compile('<a href="'+av+'