大学it python程序设计满分作业 (3)豆瓣电影排名前250 保存为xlsx格式 爬虫

大学it python程序设计满分作业 (3)
豆瓣电影排名前250 保存为xlsx格式
爬虫

import requests, bs4, openpyxl

# 创建工作薄
wb=openpyxl.Workbook()  
# 获取工作薄的活动表
sheet=wb.active 
# 工作表重命名
sheet.title='movies' 

sheet['A1'] ='序号'       # 加表头,给A1单元格赋值
sheet['B1'] ='电影名'     # 加表头,给B1单元格赋值
sheet['C1'] ='评分'      # 加表头,给C1单元格赋值
sheet['D1'] ='推荐语'    # 加表头,给D1单元格赋值
sheet['E1'] ='链接'     # 加表头,给E1单元格赋值

headers={'user-agent':'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_13_6) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/71.0.3578.98 Safari/537.36'}
for x in range(10):
    url = 'https://movie.douban.com/top250?start=' + str(x*25) + '&filter='
    res = requests.get(url, headers=headers)
    bs = bs4.BeautifulSoup(res.text, 'html.parser')
    bs = bs.find('ol', class_="grid_view")
    for titles in bs.find_all('li'):
        num = titles.find('em',class_="").text
        title = titles.find('span', class_="title").text
        comment = titles.find('span',class_="rating_num").text
        url_movie = titles.find('a')['href']

        if titles.find('span',class_="inq") != None:
            tes = titles.find('span',class_="inq").text
            sheet.append([num, title, comment, tes, url_movie])
            # 把num, title, comment, tes和url_movie写成列表,用append函数多行写入Excel
            print(num + '.' + title + '——' + comment + '\n' + '推荐语:' + tes +'\n' + url_movie)
        else:
            sheet.append([num, title, comment, None,url_movie])
            print(num + '.' + title + '——' + comment + '\n' +'\n' + url_movie)

# 最后保存并命名这个Excel文件
wb.save('movieTop2501.xlsx')

爬取电影名,评分,推荐语,播放链接相关信息,并分别保存为xlsx格式

小白一枚,希望能跟大佬交流

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

yk 坤帝

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值