爬虫入门:python+pycharm,豆瓣电影信息,短评,分页爬取,mysql数据库连接
本文爬虫实现的功能:随便在豆瓣网站中选择一部电影,获取影片详细信息,并自动获取该影片的短评链接,再跳转到短评页面,获取各位观众的影评,最后将爬取的数据存储到数据库中。开发环境:python3 + pycharm +WIN +mysql步骤展示:1.选取某一 影片,爬取该影片部分信息2.下拉到该影片的短评区,爬取全部评论的链接 ...
原创
2018-03-03 23:00:18 ·
5335 阅读 ·
1 评论