用Scrapy框架爬取豆瓣电影,构建豆瓣电影预测评分模型
文章目录前言一、Scrapy爬虫爬取豆瓣电影1. Scrapy框架介绍(1) Scrapy框架构造:(2) 数据流(3) 项目结构2. 创建爬虫爬取豆瓣(1)创建项目(2) 创建Item(3) 解析Response和Request(4) Item Pipeline连接mysql数据库存储数据二、构建豆瓣电影评分预测模型1.引入库2.读入数据总结前言这段时间对爬虫进行了一定的学习,爬虫除了requests和BeautifulSoup还有很多框架,使用requests等库写爬虫如果爬取量不是太大,速度要求
原创
2021-05-31 00:12:25 ·
4083 阅读 ·
4 评论