腾讯hr面试题目Python爬取姜子牙网上影评，实现词云图(3)，Python工程师最容易遇到4个瓶颈是什么

• wordcloud

• jieba

相关模块pip安装即可

国庆假期原本小编也是去看了这部电影的，看完之后总体而言还是比较失望的，动画效果是真的好，但是剧情太拉垮了~

网上很多影评好评都是给的动画特效，差评都是给的剧情方面~

言归正传~咱们今天爬取一下豆瓣影评，看看各大网友都是什么样的看法吧

目标网页

---

豆瓣网是静态网页，网站上面的数据都是有再网页源代码有的，请求网页，返回response数据，然后解析数据，保存数据就OK了，一气呵成，对于静态网页就不过多的说明了，还是比较简单的~

影评爬虫代码

---

import requests

import parsel

import time

for page in range(0, 3000, 20):

time.sleep(1)

url = ‘https://movie.douban.com/subject/25907124/reviews’

headers = {

‘Accept’: ‘text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,/;q=0.8,application/signed-exchange;v=b3;q=0.9’,

‘Host’: ‘movie.douban.com’,

‘Referer’: ‘https: // movie.douban.com / subject / 26754233 / reviews?start = 140’,

‘User-Agent’: ‘Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/84.0.4147.105 Safari/537.36’,

}

response = requests.get(url=url, headers=headers)

selector = parsel.Selector(response.text)

data = selector.css(‘#content .article .review-list .short-content::text’).getall()

for i in data:

a = i.strip().replace(‘\n’, ‘’).replace(‘)’, ‘’).replace(‘(’, ‘’)

with open(‘姜子牙影评’ + ‘.txt’, mode=‘a’, encoding=‘utf-8’) as f:

自我介绍一下，小编13年上海交大毕业，曾经在小公司待过，也去过华为、OPPO等大厂，18年进入阿里一直到现在。

深知大多数Python工程师，想要提升技能，往往是自己摸索成长或者是报班学习，但对于培训机构动则几千的学费，着实压力不小。自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！

因此收集整理了一份《2024年Python开发全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友，同时减轻大家的负担。

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，基本涵盖了95%以上Python开发知识点，真正体系化！

由于文件比较大，这里只是将部分目录大纲截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频，并且后续会持续更新

如果你觉得这些内容对你有帮助，可以添加V获取：vip1024c （备注Python）

最后

不知道你们用的什么环境，我一般都是用的Python3.6环境和pycharm解释器，没有软件，或者没有资料，没人解答问题，都可以免费领取（包括今天的代码），过几天我还会做个视频教程出来，有需要也可以领取~

给大家准备的学习资料包括但不限于：

Python 环境、pycharm编辑器/永久激活/翻译插件

python 零基础视频教程

Python 界面开发实战教程

Python 爬虫实战教程

Python 数据分析实战教程

python 游戏开发实战教程

Python 电子书100本

Python 学习路线规划

一个人可以走的很快，但一群人才能走的更远。如果你从事以下工作或对以下感兴趣，欢迎戳这里加入程序员的圈子，让我们一起学习成长！

AI人工智能、Android移动开发、AIGC大模型、C C#、Go语言、Java、Linux运维、云计算、MySQL、PMP、网络安全、Python爬虫、UE5、UI设计、Unity3D、Web前端开发、产品经理、车载开发、大数据、鸿蒙、计算机网络、嵌入式物联网、软件测试、数据结构与算法、音视频开发、Flutter、IOS开发、PHP开发、.NET、安卓逆向、云计算

MySQL、PMP、网络安全、Python爬虫、UE5、UI设计、Unity3D、Web前端开发、产品经理、车载开发、大数据、鸿蒙、计算机网络、嵌入式物联网、软件测试、数据结构与算法、音视频开发、Flutter、IOS开发、PHP开发、.NET、安卓逆向、云计算**