学习python，做爬虫好还是web开发?

agi大模型

已于 2024-01-16 16:07:08 修改

阅读量656

点赞数

分类专栏： Python 文章标签： python 爬虫学习 web开发 python教程

于 2023-02-22 08:45:00 首次发布

本文链接：https://blog.csdn.net/weixin_49892805/article/details/129136691

版权

Python 专栏收录该内容

236 篇文章 3 订阅

订阅专栏

前言

[网络爬虫]是一种按照一定的规则，自动的抓取万维网信息的程序或者。下面是小编为您整理的关于python做web还是做爬虫，希望对你有所帮助。

python做web还是做爬虫

熟悉了解什么的就真只是熟悉了解，玩python的多少都会爬虫(浅点就是请求然后解析页面之类的，深了就研究研究反爬，多线程并行，[大数据挖掘]之类的)，个人建议在大四阶段也不要就选定哪个方向，你就都学就是了。

可以先了解下各个方向的概况，在实际中的应用，然后可以选择性的学习，也不限于web和爬虫，Python也好多方向呢，况且 [条条大路通罗马]，爬虫玩得好的，他[数据结构算法]网络编程web什么的都不会差，在起步阶段还是应该多涉猎，慢慢在实际中摸索，摸索自己的兴趣，摸索在实践中的应用，逐渐的你也就不会说是我只是做web开发或者爬虫的了。

python工程师主攻web方向还是爬虫方向?

python被广泛地用在Web开发、运维自动化、测试自动化、数据挖掘等多个行业和领域。一项专业调查显示，75%的受访者将Python视为他们的主要开发语言，反之，其他25%受访者则将其视为辅助开发语言。将Python作为主要开发语言的开发者数量逐年递增，这表明Python正在成为越来越多开发者的开发语言选择。python工程师主攻web方向还是方向?

Python爬虫能做什么?现在典型的数据聚合类的网站都需要爬虫。比如Google[搜索引擎]。Google能在几毫秒之内提供给你包含某些关键字的页面，肯定不是实时给你去找网页的，而是提前抓好，保存在他们自己的数据库里。所以种子搜索引擎，网盘搜索引擎，等都是用爬虫实现抓好数据放在数据库里的。另外有一些提供信息对比的网站，比如比价类的网站，就是通过爬虫抓取不同购物网站商品的价格，然后将各个购物网站的价格展示在网站上。购物网站的价格时时都在变，但是[比价网]站抓到的数据不会删除，所以可以提供价格走势，这是购物网站不会提供的信息。除此之外，站在个人的角度还可以用爬虫做一些好玩的事情。比如我们想看大量的图片，可以写一个爬虫批量下载下来，不必一个一个点击保存，还要忍受网站的广告了;比如我们想备份自己的资料，例如保存下来我们在豆瓣发布过的所有的广播，可以使用爬虫将自己发布的内容全部抓下来，这样即使一些网站没有提供备份服务，我们也可以自己丰衣足食。

Python作为一种灵活好学的[脚本语言]，已经越来越受程序员的欢迎和热捧，甚至成为程序员的必备技能。是Python的Web开放框架，很多人说学习Python就是在学Django，从这里也看的出Django的强大。我们都知道Web一直都是不可忽视的存在，我们离不开网络，离不开Web，利用Python的框架可以做网站，而且都是一些精美的前端界面，还有我们需要掌握一些数据的应用。

如果选择，用学习爬虫吗?定位全栈Python开发的话，肯定都要学习的，正所谓技多不压身。

python是专门用来做网络爬虫的吗

python不是专门用来做爬虫的，Python可以做很多事情。它在做爬虫方面的确有一定的优势。写起来比较方便，简洁，爬取速度快，处理cookie，验证码等等爬虫常见问题也方便。

python网络爬虫可以干什么?

1.从网站某一个页面(通常是首页)开始，读取网页的内容，找到在网页中的其它[链接地址]，然后通过这些链接地址寻找下一个网页，这样一直循环下去，直到把这个网站所有的网页都抓取完为止。如果把整个互联网当成一个网站，那么[网络蜘蛛]就可以用这个原理把互联网上所有的网页都抓取下来。

2.网络爬虫(又被称为[网页蜘蛛]，网络机器人，在FOAF社区中间，更经常的称为网页追逐者)，是一种按照一定的规则，自动的抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁，自动索引，模拟程序或者[蠕虫]。

读者福利：如果你喜欢编程，那这套python学习资料一定对你有用，

对于0基础小白入门：