B站视频评论（bilibili视频评论）获取

from selenium import webdriver
from selenium.webdriver.chrome import options
from selenium.webdriver.support import expected_conditions as EC
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.common.by import By
from bs4 import BeautifulSoup
import time
import pandas as pd
import re
import requests
import json
from selenium.webdriver.common.keys import Keys
import csv


driver=webdriver.Chrome()

driver.get('https://www.bilibili.com/video/BV1Vt411M7kA?from=search&seid=9981834574949647154&spm_id_from=333.337.0.0')
#此处输入视频链接即可

time.sleep(3)
#获取页面初始高度
js="return action=document.body.scrollHeight"
height=driver.execute_script(js)

#将滚动条调整至页面底部
driver.execute_script('window.scrollTo(0,document.body.scrollHeight)')
time.sleep(5)

#定义初始时间戳（秒）
t1=int(time.time())

#定义循环标识，用于种植while循环
status=True

#重试次数
num=0

while status:
    #获取当前时间戳（秒）
    t2=int(time.time())
    #判断时间初始时间戳和当前时间戳相差是否大于30秒，小于30秒则下拉滚动条
    if t2-t1<30:
        new_height=driver.execute_script(js)
        if new_height>height:
            time.sleep(1)
            driver.execute_script('window.scrollTo(0,document.body.scrollHeight)')
            #重置初始页面高度
            height=new_height
            #重置初始时间戳，重新计时
            t1=int(time.time())
        elif num<10:
            time.sleep(3)
            num=num+1
        else:
            print('滚动条已处于页面最下方！')
            status=False 
            #滚动条调整至页面底部
            driver.execute_script('window.scrollTo(0,0)')
            break

data=[]
commentElement=driver.find_elements_by_xpath('//p[@class="text"]')


text=[i.text for i in commentElement]
data.extend(text) 

with open(r'D:\b站.csv',"w",encoding='utf-8') as file:
    writer=csv.writer(file,delimiter='\n')
    writer.writerows(map(lambda i:[i],data))

运行程序之后无需进行任何操作，等待爬取完成，出现“滚动条已处于页面最下方！”表示完成。可选确认存储文件中是否有数据，程序打开的浏览器啥时候关或者关不关都无所谓。