python爬取BT之家特定频道前5页电影信息（小白操作）

文兄兄兄

于 2020-11-11 20:51:08 发布

阅读量4.1k

点赞数

分类专栏：爬虫文章标签： python

本文链接：https://blog.csdn.net/m0_52346971/article/details/109630945

版权

本文介绍了一个新手如何使用Python爬取BT之家恐怖频道的前5页电影信息，将数据保存为XLS文件的过程。代码简单易懂，适合初学者参考，同时也表达了作者期待优化代码的愿望。

摘要由CSDN通过智能技术生成

python爬取BT之家特定频道前5页电影信息（小白操作）

想要爬的网页如下，希望得到BT之家恐怖频道的电影信息，并存档xls

在这里插入图片描述

代码如下

import requests,openpyxl
wb=openpyxl.Workbook()  
#创建工作薄
sheet=wb.active 
#获取工作薄的活动表
sheet.title='horror' 
#工作表重命名

sheet['A1'] ='电影信息'     #加表头，给A1单元格赋值

from bs4 import BeautifulSoup
#引入request和bs

for x in range(5):
    url='http://www.7btjia.com/forum-index-fid-1-typeid1-0-typeid2-164-typeid3-0-typeid4-0-page-'+str(x+1)+'.htm'
    #观察网站翻页结构（此处在Elements用网页的底部页码导航定位代码处，观察不同页码的网址规律）

    headers={'user-agent':'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/78.0.3904.108 Safari/537.36'}

    res=requests.get(url,headers=headers)