爬虫可以做哪些有趣的事情，欢迎讨论

最新推荐文章于 2024-07-14 19:17:52 发布
最新推荐文章于 2024-07-14 19:17:52 发布
阅读量2.8k 收藏 2
点赞数 1
分类专栏： 爬虫
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lb521200200/article/details/53616738
版权
        目前 楼主做了一个基于微信订阅号的聊天机器人， 爬取很多笑话，段子，天气预报网站，部分科技新闻等，机器人可以讲笑话，讲段子，预报天气，简单聊天等。结合聊天机器人，爬虫还可以做哪些有趣的事情，目前想法接下来爬股票，爬美女图片，爬部分问答网站以及百科知识等，欢迎大家讨论给出建议
梦无痕123
关注
专栏目录
（一）python网络爬虫（理论+实战）——爬虫的初步认识
c1007857613的专栏
12-02 3739
对爬虫的初步介绍，适合小白白们
2024年Python最全【2024】python面试题大全【爬虫阶段】_爬虫scrapy面试题
2401_84689238的博客
04-30 821
敏捷开发以用户的需求进化为核心，采用迭代、循序渐进的方法进行软件开发。在敏捷开发中，软件项目在构建初期被切分成多个子项目，各个子项目的成果都经过测试，具备可视、可集成和可运行使用的特征。换言之，就是把一个大项目分为多个相互联系，但也可独立运行的小项目，并分别完成，在此过程中软件一直处于可使用状态。
有趣的爬虫
weixin_45441024的博客
12-28 322
有趣的python 1.今天新学到的，实现的功能是通过语音的方式播报天气，自己写的，如有不足还请多多指正 import requests from lxml import etree import pyttsx3 from xpinyin import Pinyin headers={'user-agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/87.0.4280.
python爬虫有啥用-利用爬虫技术能做到哪些很酷很有趣很有用的事情？
weixin_37988176的博客
10-30 529
原标题：利用爬虫技术能做到哪些很酷很有趣很有用的事情？ 一个熟悉爬虫技术的人的独白！不得不说，Python爬虫对于我来说真是个神器。之前在分析-些经济数据的时候，需要从网上抓取一些数据下来，想了很多方法，一开始是通过Excel,但是Excel只能爬下表格，局限性太大了。之后问了学编程的朋友，他说JavaScrip也能实现，于是懵懵董董地就去学Java (我那朋友是学Java的，我当时问他用Java...
局域网如何共享文件，还有谁不知道？
最新发布
weixin_44699208的博客
07-14 2199
神卓文件管家是一款功能丰富、便捷实用的文件管理工具，它能够将您电脑上原本杂乱无章的各类文件以清晰直观的报表形式呈现，让您对自己电脑上的文件分布和类型一目了然，轻松实现快速检索和精准定位到需要的文件。
python爬虫能干什么-Python实战：网络爬虫都能干什么？
weixin_37988176的博客
11-01 479
整站下载器:siteSuckerhttps://blog.csdn.net/l_215851356/article/details/54377582http://python.jobbole.com/89209/https://blog.csdn.net/qzc70919700/article/details/73309117/@冰蓝之前在北京买房，谁想房价开始疯长，链家的房价等数据分析只给了一小...
python 有趣的爬虫_Python有趣|微博榜单爬虫，尽知天下事
weixin_28739079的博客
01-28 153
项目背景大家对于网页的数据爬虫了解的已经很多了，这次爬取APP端的数据。之前我也讲解过APP爬虫，但是没有讲解过Fiddler的配置和使用。这次以微博榜单为案例，介绍APP爬虫流程和数据的可视化(数据为2019年2月28号采集)。整个项目流程如下图所示： 环境配置首先，在网上下载Fiddler软件，这个和普通的软件安装一样，这里就不详细讲解了。接着，我们打开Fiddler软件，进行配置，打开to...
网络爬虫能做什么事情
bus_lupe的博客
09-11 496
网络爬虫就是自动从互联网中定向或不定向地采集信息的程序。 通用网络爬虫、聚焦网络爬虫。 网络爬虫能做什么事情 搜索引擎 采集金融数据 采集商品数据 自动过滤广告 采集竞争对手的客户数据 采集行业相关数据，进行数据分析 ...
学 Java 网络爬虫，需要哪些基础知识？
热门推荐
平头哥的技术博文
10-04 1万+
说起网络爬虫，大家想起的估计都是 Python ，诚然爬虫已经是 Python 的代名词之一，相比 Java 来说就要逊色不少。有不少人都不知道 Java 可以做网络爬虫，其实 Java 也能做网络爬虫而且还能做的非常好，在开源社区中有不少优秀的 Java 网络爬虫框架，例如 webmagic 。我的第一份正式工作就是使用 webmagic 编写数据采集程序，当时参与了一个舆情分析系统的开发，这里...
Python爬虫(1)自检与讨论
qq_42315262的博客
01-15 668
# -*- codeing = utf-8 -*- from bs4 import BeautifulSoup # 网页解析，获取数据 import re # 正则表达式，进行文字匹配` import urllib.request, urllib.error # 制定URL，获取网页数据 import xlwt # 进行excel操作 #import sqlite3 # 进行SQLite数据库操作 findLink = re.compile(r'<a href="(.*?)">').
爬虫教程（ 6 ） --- 爬虫 进阶、扩展
墨鱼菜鸡
07-11 6846
1. 前言 1. 先看一个最简单的爬虫。 import requests url = "http://www.cricode.com" r = requests.get(url) print(r.text) 2. 一个正常的爬虫程序 上面那个最简单的爬虫，是一个不完整的残疾的爬虫。因为爬虫程序通常需要做的事情如下： 1)给定的种子 URLs，...
分享两个有趣的爬虫：百度贴吧和百度翻译
月小水长
05-27 826
本文首发于我的微信公众号：月小水长 原文地址：https://mp.weixin.qq.com/s/uehzjUl8QEaQHtCx4o4BXg 百度翻译爬虫 程序跑起来的效果是这样的， 自动翻译，而且支持中英文互译 在调试代码的过程中，我发现百度翻译的加密参数和谷歌翻译差不多，我以前也写过一篇有关谷歌翻译的文章，感兴趣的同学可以看看： 更让我大跌眼镜的是，不仅如此，百度翻译的加密函数也是抄袭谷...
一些非常有趣的python爬虫例子
追心
05-02 3647
hello，小伙伴们，大家好今天给大家分享的开源项目是一个关于爬虫的开源项目。这个开源项目，对新手比较友好, 主要爬取淘宝、天猫、微信、豆瓣、QQ等网站。感兴趣的小伙伴可以看一下。 项目简介 一些常见的网站爬虫例子，代码通用性较高，时效性较久。项目代码对新手比较友好，尽量用简单的python代码，并配有大量注释。 下载 没有或不懂如何设置代理的用户，可跳转至镜像仓库码云Gitee进行下载, 以便获...
【Python爬虫】分享11 个有趣的 Python 爬虫例子，附源码！
2201_75362610的博客
05-10 3842
给大家分享一波Python全套学习资料，免费！免费！免费！微信扫描下方CSDN官方认证二维码即可领取啦。
一个贼有趣的Python爬虫:带你游览微博博主的前世今生！
爬遍所有网站
04-01 567
目录 一、前言二、项目目标三、环境配置四、数据提取分析4.1 用户微博主页分析4.2 微博详情页分析五、代码编写5.1 创建scrapy项目和爬虫5.2 修改setting.py5.3 设置items.py5.4 编写one_people.py5.5 编写pipelines.py5.6 编写midelewares.py六、结果展示6.1 评论数据展示6.2 微博数据...
《github精选系列》——非常有趣实用的python爬虫例子
09-07 913
1 简单总结 1 淘宝模拟登录 2 天猫商品数据爬虫 3 爬取淘宝我已购买的宝贝数据 4 每天不同时间段通过微信发消息提醒女友 5 爬取5K分辨率超清唯美壁纸 6 爬取豆瓣排行榜电影数据(含GUI界面版) 7 多线程+代理池爬取天天基金网、股票数据(无需使用爬虫框架) 8 一键生成微信个人专属数据报告(了解你的微信社交历史)) 9 一键生成QQ个人历史报告 10 一键生成个人微信朋友圈数据电子书 11 一键分析你的上网行为(web页面可视化) 12 一键导出微信读书的书籍和笔记 github地址：
Python 爬虫从入门到放弃（11 个有趣的 Python 爬虫例子）
m0_59235699的博客
11-08 429
同样都是程序员，为什么别人家的程序员效率那么高？因为他用 Python。今天推荐的这个项目就可以让你释放双手，它是：，这个项目包含一些常见的网站爬虫例子，代码通用性较高，时效性较久。项目代码对新手比较友好，尽量用简单的 Python 代码，并配有大量注释。目前该项目包含 11 个有趣的 Python 爬虫例子，一个比一个有意思，不信往下看。
自己搜罗了一些感觉蛮有意思的爬虫相关的网站
weixin_30384031的博客
08-16 152
大家有什么更加棒的网站也可以在评论区发出来，我也会不定期加进来哦 爬虫原理初入门 小实践入门小实践2 Python写爬虫抓站的一些技巧 抓站技巧2 https://docs.scrapy.org/en/latest/topics/selectors.html 关于scrapy的官方网站 https://www.whatismybrowser.com/ 这个是用来查看你当前所用浏览...
安利一个简单好玩的爬虫
phenomenonsTell的博客
11-27 899
到大三了，想着要做点什么，然后在github上看啊看，看着看着就写完了一个爬虫。虽然不能实现太多复杂的功能，但是如果你知道Kibana,就可以玩转更多功能。地址在这：https://github.com/TransientBuckwheat/nest-spider
python爬虫可以做什么
07-28
Python爬虫可以做很多事情，包括但不限于以下几个方面： 1. 数据采集：爬虫可以访问网页并提取所需的数据，如新闻、商品信息、股票数据等。这些数据可以用于分析、建模或展示。 2. 数据清洗和处理：爬虫可以自动...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值