![](https://img-blog.csdnimg.cn/20201014180756757.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
python
文章平均质量分 77
lyc2016012170
这个作者很懒,什么都没留下…
展开
-
numpy函数查询手册
scipy可以被构建为使用加速库或其他改进库来实现FFTs、线性代数和特殊函数。该模块允许开发人员在scipy可用时透明地支持这些加速功能,但仍支持仅安装NumPy的用户。原创 2022-09-05 09:16:13 · 366 阅读 · 0 评论 -
使用chrome的debug模式在已经打开的chrome浏览器上进行selenium操作
目的:因本地RPA无法点击到目标(主要怕使用chromedriver启动的浏览器被判断为爬虫),所以想通过debug模式启动浏览器,进而使用selenium进行操作1.windows电脑打开cmd终端输入打开chrome浏览器的命令并指定运行端口我这里使用的是全路径的chrome浏览器地址,如果不想用可以自己切换到文件夹下,或者通过配置环境变量来解决2.在打开的浏览器中输入www.baidu.com3.在pycharm中输入代码,向打开的chrome窗口中的百度输入框输入csdn文字...原创 2022-06-06 17:00:52 · 549 阅读 · 1 评论 -
You-Get开源在线下载神器,搭配python更加丝滑(文中案例演示)
大家好,我是辰哥今天给大家介绍一个号称可以下载全网视频、音频、图像的开源库——you-getyou-get这里说全网可能一点夸张,但如果实际上去使用you-get下载媒体文件(视频、音频、...原创 2021-09-03 08:34:00 · 829 阅读 · 0 评论 -
python实现两台不同主机之间进行通信(客户端和服务端)——Socket
大家好,我是辰哥~今天教大家通过Python进行Socket网络编程(做一个聊天程序)可以实现在不同的主机(电脑)之间进行通话。具体效果如何,接着往下看可以看到客户端(上方)向服务器端(下方)发送了内容,服务器端进行了回复【备注:客户端是我的本机,服务器是另一条主机(阿里云服务器)】两台主机的目的:验证两台主机可以相互通信socket先简单给大家介绍一下什么是socket,socket(简称 套接字) 是进程间通信的一种方式,它与其他进程间通信的一个主要不同是:它能实现不同主机间的进程原创 2021-08-31 09:06:02 · 4869 阅读 · 1 评论 -
常用正则表达式最强汇总(含Python代码举例讲解+爬虫实战)
大家好,我是辰哥~本文带大家学习正则表达式,并通过python代码举例讲解常用的正则表达式最后实战爬取小说网页:重点在于爬取的网页通过正则表达式进行解析。正则表达式语法Python的re模块(正则表达式)提供各种正则表达式的匹配操作。在绝大多数情况下能够有效地实现对复杂字符串的分析并取出相关信息。在讲解如何实际应用正则表达式之前,先教大家学习并掌握正则表达式的基本语法(匹配规则)。正则表达式匹配过程如下:(1)将定义好的正则表达式和字符串进行比较。(2)如果每一个字符串都能匹配,则成功;一旦有原创 2021-08-27 14:28:41 · 307 阅读 · 0 评论 -
Python实现发送邮件(实现单发/群发邮件验证码)
Python smtplib 教程展示了如何使用 smtplib 模块在 Python 中发送电子邮件。 要发送电子邮件,我们使用 Python 开发服务器,Mailtrap 在线服务和共享的网络托管邮件服务器。smtplib库python发送邮件需要用到smtplib库,先简单了解一下SMTP简单邮件传输协议(SMTP)是用于电子邮件传输的通信协议。 Is 是一个 Internet 标准,该标准于 1982 年由 RFC 821 首次定义,并于 2008 年由 RFC 5321 更新为扩展 SMT原创 2021-08-26 17:45:14 · 659 阅读 · 0 评论 -
Python对系统数据进行采集监控——psutil
大家好,我是辰哥~今天给大家介绍一个可以获取当前系统信息的库——psutil利用psutil库可以获取系统的一些信息,如cpu,内存等使用率,从而可以查看当前系统的使用情况,实时采集这些信息可以达到实时监控系统的目的。psutil库psutil的安装很简单pip install psutilpsutil库可以获取哪些系统信息?psutil有哪些作用1.内存使用情况2.磁盘使用情况3.cpu使用率4.网络接口发送接收流量5.获取当前网速6.系统当前进程... 下面通过具体原创 2021-08-20 09:54:34 · 1008 阅读 · 0 评论 -
用Python爬取《王者荣耀》英雄皮肤数据并可视化分析,用图说话
大家好,我是辰哥~今天辰哥带大家分析一波当前热门手游《王者荣耀》英雄皮肤,比如皮肤上线时间、皮肤类型(勇者;史诗;传说等)、价格。获取数据数据来源于《王者荣耀官方网站》,网页数据如下:所需...原创 2021-08-16 08:00:00 · 1651 阅读 · 7 评论 -
七夕特别篇|用Python绘画牛郎织女在鹊桥相见
大家好,我是辰哥~明天就是七夕节,首先提前祝福有伴侣的小伙伴,七夕快乐,没有伴侣的小伙伴,明天就会找到伴侣,(给看到这句话的你好运加持,哈哈哈)。作为会Python的我们必须做点好玩且有意...原创 2021-08-13 16:22:37 · 1045 阅读 · 1 评论 -
针对不同场景的Python合并多个Excel方法
大家好,我是辰哥~在辰哥看来,技术能够减少繁琐工作带来的枯燥,技术+实际=方便。最近辰哥也是在弄excel文件的时候发现手动去整理有点繁琐枯燥,想着技术可以代替我去处理这部分繁琐的工作那何乐而不为呢~~~三种场景:多个同字段的excel文件合并成一个excel多个不同字段的excel文件拼接成一个excel一个excel的多个sheet合并成一个sheet辰哥目前想到的仅是辰哥遇到的这三种情况(如果还有很多其他情况的,欢迎在下方留言,因为辰哥日常非经常涉及多种excel处理.原创 2021-08-10 16:36:43 · 662 阅读 · 1 评论 -
基于Flask开发网站 -- 前端Ajax异步上传文件到后台
大家好,我是辰哥~辰哥最近利用空闲时间在写一个在线可视化平台,过程中也觉得一些技术还是比较有意思的,所以就以模块化的形式分享出来。如:从网页界面(前端)上传文件到服务器(后端)。放一下该模块的界面图瞧一瞧:点击上传excel文件按钮,选择excel文件后可以在线预览,并且后端接收保存到服务器,本文主要是分享上传文件这块内容。背景:前端是html,后端使用Flask框架,在前端点击上传一个excel文件,后端接收并保存到本地。01 前端处理1.文件选择框相信写过html代码的都知道,上传文件.原创 2021-08-01 11:22:35 · 707 阅读 · 0 评论 -
我去!爬虫遇到JS逆向AES加密反爬,哭了
今天准备爬取网页时,遇到『JS逆向AES加密』反爬。比如这样的:在发送请求获取数据时,需要用到参数params和encSecKey,但是这两个参数经过JS逆向AES加密而来。既然遇到了这个情况,那么辰哥就教大家如何去解决这类反爬(JS逆向AES加密)01 网页分析在开始分析JS逆向AES加密之前,先简单介绍一下要爬取的内容:下载某抑云音乐。其中获取歌曲的真实播放地址m4a的过程涉及到JS逆向AES加密。点击播放,在浏览器中查看抓取到的数据包,如下图所示:查看响应数据:可以看到在url字段原创 2021-07-29 15:43:46 · 750 阅读 · 0 评论 -
搞定短视频!批量下载快手视频(附源码)
大家好,我是辰哥~相信大家都接触了短视频平台,比如某音、某手等平台,竟然大家都熟悉了,那么今天辰哥分享的技术是:在某手上搜索视频,并实现下载!01 获取搜索链接编写过接口或者开发过网站的小伙伴都知道,对一个服务器上的资源进行请求时,是通过访问链接(接口),服务器进行响应返回数据。1.搜索请求链接因此,我们第一步先获取到搜索的请求链接,这里辰哥通过抓取数据包的方式进行获取。这里通过mitmproxy抓取某手小程序,如果不清楚这个技术操作的小伙伴,可以参考我之前的一篇文章(以【某程旅行】为例,讲述.原创 2021-07-26 17:06:11 · 1703 阅读 · 0 评论 -
打造一个window桌面应用:在线聊天对话机器人
大家好,我是辰哥~~~本文目标:打造一个window桌面应用:在线聊天对话机器人。今天辰哥教大家做一个在线聊天对话机器人桌面应用,已经打包成exe可执行文件,读者可以直接拿来使用, 先上演示图聊天客户端桌面应用设计Ui:Pyqt5对话回答:图灵机器人打包EXE:Pyinstaller本文通过界面设计、后端处理、效果演示、打包exe这四方面去进行讲解。打包好EXE下载地址:https://wwi.lanzoui.com/iCygNrp0c6f01、界面设计1.安装pyqt51.原创 2021-07-21 20:52:03 · 1887 阅读 · 13 评论 -
以【某程旅行】为例,讲述小程序爬虫技术
大家好,我是辰哥~~~前提:在学习本文采集小程序数据之前,相信大家都掌握了抓取数据包的技能,比如使用Mitmproxy进行抓取数据包。如果看到这里的你还没有掌握的话,可以参与辰哥之前的写的...原创 2021-07-17 14:00:00 · 495 阅读 · 0 评论 -
【保姆级】Python项目(Flask网页)部署到Docker的完整过程
大家好,我是辰哥~前提:相信看到这篇文章的读者应该已经学会了Docker的安装以及Docker的基本使用,如果还不会的可以参考我之前的文章进行详细学习!1.安装版:2300+字!在不同系统上安装Docker!看这一篇文章就够了2.使用版:Docker学不会?不妨看看这篇文章学完了Docker之后,今天咱们就来讲解如何在docker部署咱们的python程序!(下图是讲解安装docker时候,会有一期推文讲解部署python程序,今天就实现了)01、Flask网页项目辰哥以之前的一个简单的项目.原创 2021-07-15 20:29:03 · 961 阅读 · 13 评论 -
Python分析【公众号】历史评论,看看大家的留言情况!
大家好,我是辰哥~~~辰哥玩公众号有一段时间了,这期文章分析一波读者的留言情况,不仅可以对公众号的各位铁粉一目了然,还可以通过分析的结果对公众号的经营进行更好的规划。如读者留言的内容通常是内容是什么?关注的点是什么等等这些。分析目录累计用户留言总数排名每一篇文章留言总数排名留言内容词云图回复内容词云图分析每月留言总数排名分析月份留言数top1 & 每天留言排名分析辰哥每月发文情况01、预览数据公众号后台提供数据导出功能,辰哥通过该功能可以一.原创 2021-07-12 20:53:25 · 453 阅读 · 1 评论 -
不装了,我摊牌了!人像卡通化的功能我实现了
不装了,我摊牌了!辰哥实现了人像卡通化的功能,玩了绝对上瘾!今天咱们来搞点有趣的事情:人像卡通化。本文的人像卡通化功能没有使用第三方接口功能,辰哥知道百度有提供接口,并且十来行代码就可以搞定,但是有使用次数限制,所以辰哥就通过搭建神经网络模型,借助数据集进行训练,最后得到模型。这样得到的人像卡通化的功能可以顺便使用,并且还可以通过提高数据集的质量或者调整参数,让生成的卡通人像更加逼真!先来看一下效果:看完效果之后,是不是觉得很神奇?辰哥告诉你,实际很简单,看完本文之后,你也可以自己动手直接生成你自原创 2021-07-05 15:26:04 · 1148 阅读 · 2 评论 -
pyhton爬取爱豆(李易峰)微博评论
今日目标:微博,以李易峰的微博为例:https://weibo.com/liyifeng2007?is_all=1然后进入评论页面,进入XHR查找真是地址:https://weibo.com/aj/v6/comment/big?ajwvr=6&id=4353796790279702&from=singleWeiBo很明显,是动态的,抓取也是按我以前写的那些方法来,就不一一说了,他这里最重要的还是那串数字,所以我们只要在第一个网址哪里把那串数字找出来就算成功一半了,这次需要用到re原创 2021-06-29 15:56:38 · 443 阅读 · 0 评论 -
我做到了!《斗罗大陆》人物关系可视化
今天辰哥来教大家从一本小说/名著里面提取出人名,并对人名之间的关系进行统计(同一段里面人名两两出现),根据人名之间的关系进行绘制关系图–gephi核心知识点:提取文本中人名统计文本中人物之间的关系绘制网络关系图先看一下效果:01 jieba小例子在开始分析《斗罗大陆》小说之前,先来一个小例子让大家对jieba库的使用有个印象。说明:可以看到文本内容结果jieba库分词之后,可以获取每一个的词性。咱们这里需要获取人名,只需要挑选出nr的词性,并统计每个词的次数。原创 2021-06-27 20:50:01 · 925 阅读 · 1 评论 -
办公利器!用Python快速将任意文件转为PDF
痛点: 相信大家都会遇到一种场景。老师/上司要求你把某个文件转为pdf,并且是一批(不止一个,一个的话手动就可以搞定),并且这种是枯燥无聊的工作,既没有什么技术含量又累。试想一下,如果我把这些文件放到一个文件夹下,执行一下程序,几分钟后这些文件就转好。这样半天的活,只要花几分钟就解决了。岂不是美滋滋!!!今天辰哥就教大家将任意文件批量转为PDF,这里以日常办公的word、excel、ppt为例,这三种格式的文件转为PDF。01、word转PDF这里借助Python的docx2pdf去完成转换操作,该原创 2021-06-27 20:42:27 · 1806 阅读 · 0 评论 -
办公利器!用Python批量识别发票并录入到Excel表格
辰哥今天来分享一篇办公干货文章:用Python批量识别发票并录入到Excel表格。对于财务专业等学生或者公司财务人员来说,将报账发票等汇总到excel简直就是一个折磨。尤其是到年底的时候,公司的财务人员面对一大堆的发票简直就是苦不堪言。正好我们学会了Python,我们应该将Python的优势发挥起来。$#01.场景描述这里有以四张发票为例(辰哥网上搜的),将发票图片放到pic文件夹下。随便打开一张发票提取目标:金额、名称、纳税人识别号、开票人。最后将每一张发票的这四个内容保存到excel中原创 2021-06-24 16:33:16 · 1300 阅读 · 1 评论 -
用Python爬取分析【某东618】畅销商品销量数据,带你看看大家都喜欢买什么!...
大家好,我是辰哥!今天是618购物节,辰哥准备分析一波购物节大家都喜欢买什么?本文以某东为例,Python爬取618活动的畅销商品数据,并进行数据清洗,最后以可视化的方式从不同角度去了解畅...原创 2021-06-18 11:32:07 · 641 阅读 · 0 评论 -
一键导出全部邮件到本地,彻底解放双手
大家可能会遇到这样一种情况:有没有什么办法可以将邮箱里面的邮件全部下载到本地(包括图文、压缩附件、文档附件等)。比如HR、收集意见的工作人员甚至是一些负责收邮件的老师等人都会遇到这种情况。今天辰哥就教大家如何利用Python去下载邮箱中的全部邮件,本文核心库主要是zmail。01、准备工作1.安装库pip install zmail通过上面的命令即可安装zmail导入库import zmail2.开启****POP3/SMTP服务在程序中登录QQ邮箱不是使用qq邮箱密码,是使用POP3原创 2021-06-15 15:33:27 · 1920 阅读 · 0 评论 -
太神奇了!GIF的合成与提取这么好玩
大家好,我是辰哥今天辰哥教大家一个Python有趣好玩的小功能:将多张图片转为GIF,同时也可以将一个GIF动图提取出里面的图片在开始之前,先来一个动图开头(预览)01图片转GIF动图1、...原创 2021-06-12 14:00:00 · 452 阅读 · 3 评论 -
再见Xshell、Xftp!Python执行Linux命令、上传下载远程文件
大家好,我是辰哥相信大家应该都接触过Linux操作系统(Ubuntu、Centos等),那么在使用的Linux操作系统需要使用一些远程ssh工具,尤其是公网服务器。常用的ssh工具主要有:...原创 2021-06-04 13:00:00 · 677 阅读 · 1 评论 -
我去!爬虫遇到字体反爬,哭了
大家好,我是辰哥今天准备爬取某某点评店铺信息时,遇到了『字体』反爬。比如这样的:还有这样的:可以看到这些字体已经被加密(反爬)竟然遇到这种情况,那辰哥就带大家如何去解决这类反爬(字体反爬类...原创 2021-06-06 14:07:49 · 622 阅读 · 1 评论 -
花一周整理!Python全系列学习资料,全是干货
花一周整理!Python全系列学习资料,全是干货首先恭喜看到本文的你,以下的资料全部可以免费领取。这些资料共 100G+,包含:Python 基础入门学习、Python 爬虫入门到进阶视频教程、Python 数据分析教程、Python 数据可视化化教程、Python 大厂面试资料、Python 学习知识图谱、Python 电子书资料全部是精心整理,是一整套 python 学习教程,循序渐进,让你学习 Python 不再苦恼。Python 基础入门学习对于小白来说入门往往比较难,自学的话,没有一份.原创 2021-05-15 10:30:51 · 449 阅读 · 3 评论 -
太炫酷了|对全国大学数据进行可视化分析,看完后发现.....
大家好,我是阿辰。今天带大家来看一下全国所有大学的数据信息(包括专本科,覆盖全国),一共是获取到了全国31个省份,共2769所大学。先预览一下数据:这里字段主要是包括了(省份、大学、类型、公或民办、本会专科、985、211、双一流、城市、隶属于、地址)本文除了讲解怎么获取数据外,还将对这些数据进行可视化展示分析。PS: 下面将一大把可视化动图袭来,别被震撼到,因为实在是太炫酷了(哈哈哈)1.获取数据网页分析在开始获取之前,先说一下数据的来源:https://gkcx.eol.cn/scho原创 2021-04-25 22:18:57 · 1668 阅读 · 2 评论 -
实操案例!手把手教你画城市轮播地图(文末送书)
大家好,我是阿辰,今天教大家画城市轮播地图,个人觉得这类型的地图可以在很多方面有实际应用,所以就介绍给大家,并给出个实际操作案例!本文数据来源于之前的【全国火锅店数量分布】,不过不用担心,文中会给出用到的数据这里是以其中5个省份的城市为例进行演示1.画图前准备在画图之前先导入相关的库from pyecharts.charts import Map, Timelinefrom pyecharts import optionsfrom pyecharts import options as op原创 2021-04-17 15:51:43 · 421 阅读 · 0 评论 -
python3连接mysql--增删改查
ps:MYSQLdb只适用于python2.xpython3不支持MYSQLdb,取而代之的是pymysql运行会报:ImportError:No module named 'MYSQLdb'import pymysql as pmq#connect(ip.user,password,dbname)con = pmq.connect('localhost','root','123456','python_test')#操作游标cur = con.cursor()#建表cu.原创 2021-04-12 13:01:16 · 291 阅读 · 0 评论 -
以『公众号』为例,手把手教你爬取PC端数据
之前教过大家如何爬取手机APP数据【以某乎为实战案例,教你用Python爬取手机App数据】思路:主要是通过手机设置代理,然后在pc端开启抓包工具获取数据包,然后在编写python代码(get方式)去请求数据上次有粉丝说,那个是ios手机安卓手机现在需要root权限才可以安装证书,那么今天就不以手机为例,以电脑PC端为例,这样大家都可以上手尝试今天教大家抓到post数据包之后,怎么编写python代码去狗仔构造数据包,这里以获取『微信公众号』文章的阅读数、点赞数、在看数为例进行讲解(之所以以这个原创 2021-04-11 20:54:43 · 1263 阅读 · 0 评论 -
以『B站』为实战案例!手把手教你掌握爬虫必备框架『Scrapy』
1前言作为爬虫一员,掌握一门爬虫框架是必备技能,因此作为一名小白的你,我想向你推荐『Scrapy』。具体『Scrapy』是什么,作用这些就不啰嗦(都是废话,百度有Scrapy简介),时间宝...原创 2021-02-21 20:12:08 · 463 阅读 · 0 评论 -
python爬取下载m3u8加密视频,原来这么简单!
1.前言爬取视频的时候发现,现在的视频都是经过加密(m3u8),不再是mp4或者avi链接直接在网页显示,都是经过加密形成ts文件分段进行播放。今天就教大家如果通过python爬取下载m3...原创 2021-03-01 19:53:08 · 8122 阅读 · 4 评论 -
爬取淘宝热卖商品并可视化分析,看看大家都喜欢买什么!
01前言还有几天就过年了,大家都在囤年货(我也是),于是我就在淘宝上看看有什么好的,可以买一买。突然萌发一下想法,可以通过python来获取大家在淘宝都喜欢买什么,有了这个想法后,那便开始...原创 2021-02-04 09:00:00 · 2347 阅读 · 0 评论 -
王者荣耀白晶晶皮肤1小时销量突破千万!分析网友评论我发现了原因
一、简介1、这两天在朋友圈、短视频,微博这些社交平台经常刷到这些内容(王者荣耀芈月白晶晶的皮肤)。2、好奇的我就去百度了一下,发现是王者荣耀最近出的一个皮肤,看到很多人都在讨论,我也开始...原创 2021-01-30 13:49:48 · 350 阅读 · 0 评论 -
详细实战教程!部署Flask网站+域名访问+免费https证书
简介最近有几个小伙伴在问怎么给python编程的网站配置https,加上上次接了一个单子(用flask写api接口),对方也要求配置ssl加密https访问方式。为了解答和记录一下这些内...原创 2021-02-01 14:12:27 · 1021 阅读 · 0 评论 -
35行代码下载任意网页的图片
一、简介有没有一种代码可能实现下载任意网页的图片,这样对于需要下载大量壁纸,图片的小伙伴来说真是一个好福利,今天我们就来试试。先看视频演示效果35行代码下载任意网页的图片_演示视频htt...原创 2021-01-12 20:49:19 · 832 阅读 · 0 评论 -
python实现四种出行路线规划(公交、步行、驾车、骑行)
一、简介路径规划中包括步行、公交、驾车、骑行等不同方式,今天借助高德地图web服务api,实现出行路线规划。思路根据地点获取经纬度根据经纬度调用api获取路线对路线数据进行处理,便于浏览...原创 2021-01-17 21:40:20 · 3919 阅读 · 0 评论 -
python窃取摄像头照片(摄像头拍照+邮箱发送+打包exe)
一、思路1.python调用摄像头拍照python可以调用电脑的摄像头进行拍照,然后保存照片。2.发送照片到指定邮箱通过QQ邮箱官方网站获取授权码方法,将照片发送到指定的邮箱。最后将本地...原创 2021-01-10 16:07:19 · 3476 阅读 · 4 评论