- 博客(454)
- 收藏
- 关注
RSS订阅原创 利用Python爬虫抓取手机APP的传输数据_怎样抓取一个app发送的数据包(1)
表单中包括了用户名和密码，当然都是加密过了的，还有一个设备信息，直接post过去就是。另外必须加header,一开始我没有加header得到的是登录错误，所以要带上header信息。
2024-05-01 11:49:02
137
原创 利用Python爬取获取博客园文章定时发送到邮箱
\s\S.]?[\s\S.]??([\s\S.]?参数说明self.start_url 数据爬取地址self.headers 头文件self.pattern 正则表达式，用来匹配我们需要的数据内容的，你可以使用BS4,LXML,PyQuery等内容实现self.last_blog_time 最后一篇博客的更新时间self.need_send_articles 需要发送的博客地址。
2024-05-01 11:48:31
654
原创 利用Python爬取教程并转为PDF文档！(1)
该教程只提供了 HTML格式文件的下载，还是不太方便查阅，那就让我们动手将其转成PDF吧！由于我们是要把html转为pdf，所以需要手动。Windows平台直接在下载稳定版的 wkhtmltopdf 进行安装，安装完成之后把该程序的执行路径加入到系统环境 $PATH 变量中，否则 pdfkit 找不到 wkhtmltopdf 就出现错误 “No wkhtmltopdf executable found”。Ubuntu 和 CentOS 可以直接用命令行进行安装。
2024-05-01 11:47:28
227
原创 利用Python爬取全国250m精度的人口数据（GeoQ）、房价数据和公交站（线路）等数据
Python崛起并且风靡，因为优点多、应用领域广、被大牛们认可。学习 Python 门槛很低，但它的晋级路线很多，通过它你能进入机器学习、数据挖掘、大数据，CS等更加高级的领域。Python可以做网络应用，可以做科学计算，数据分析，可以做网络爬虫，可以做机器学习、自然语言处理、可以写游戏、可以做桌面应用…Python可以做的很多，你需要学好基础，再选择明确的方向。这里给大家分享一份全套的 Python 学习资料，给那些想学习 Python 的小伙伴们一点帮助！
2024-05-01 11:46:56
173
原创 【Python 百练成钢】蓝桥杯填空题
print(ans)跑步锻炼🍀问题描述🌿小蓝每天都锻炼身体。正常情况下，小蓝每天跑1千米。如果某天是周- -或者月初(1日)，为了激励自己，小蓝要跑2千米。如果同时是周一-或月初,小蓝也是跑2千米。小蓝跑步已经坚持了很长时间，从2000年1月1日周六(含)到2020年10月1日周四(含)。请问这段时间小蓝总共跑步多少千米?问题分析🌿这里主要进行一下模拟,可以使用枚举法,也可以使用Python内置的模块.对于Python而言肯定要使用其内置的模块,因为内置模块可以使你很轻松的得到答案。
2024-05-01 00:48:43
477
原创 【Python 百练成钢】蓝桥杯填空题(1)
门牌号🍀问题描述🍃小蓝要为一条街的住户制作门牌号。这条街一共有 2020 位住户，门牌号从 1 到 2020 编号。小蓝制作门牌的方法是先制作 00 到 99 这几个数字字符，最后根据需要将字符粘贴到门牌上，例如门牌 1017 需要依次粘贴字符 1、0、1、7即需要 1 个字符 0，2 个字符 1，1 个字符 7。请问要制作所有的 1 到 2020 号门牌，总共需要多少个字符2？问题分析🍃。
2024-05-01 00:47:38
301
原创 【Python 百练成钢】报时助手、成绩分析、购物清单、字符串对比
0:else:flag=Trueif flag:flag=Falseelse:成绩分析🌺问题描述小蓝给学生们组织了一场考试，卷面总分为100分，每个学生的得分都是个0到100的整数。请计算这次考试的最高分、最低分和平均分。输入描述输入的第一行包含一个整数n(1 ≤n≤104),表示考试人数。接下来n行，每行包含-个0至100的整数,示一个学生的得分。输出描述输出三行。
2024-05-01 00:45:15
298
原创 【Python 百练成钢】报时助手、成绩分析、购物清单、字符串对比(1)
按上面的规则21:54读作“twenty one fifty four”，9:07读作“nine seven”，0:15读作“zero fifteen”。对于大于20小于60的数字，首先读整十的数，然后再加上个位数。如果m为0，则将时读出来，然后加上“o’clock”，如3:00读作“three o’clock”。h小于24，m小于60。如果m不为0，则将时读出来，然后将分读出来，如5:30读作“five thirty”。现在小明很心烦，请你帮他计算一下，需要从取款机上取多少现金，才能搞定这次购物。
2024-05-01 00:44:44
260
原创 Python爬虫以及数据可视化分析之某站热搜排行榜信息爬取分析_python 爬取taptap热门榜(2)
常见镜像有：镜像名称 网址阿里云 https://mirrors.aliyun.com/pypi/simple/豆瓣 https://pypi.douban.com/simple/清华大学(推荐) https://pypi.tuna.tsinghua.edu.cn/simple/中国科学技术大学 http://pypi.mirrors.ustc.edu.cn/simple/华中理工大学 http://pypi.hustunique.com/
2024-04-30 14:00:56
243
原创 python爬虫代理ip
Python崛起并且风靡，因为优点多、应用领域广、被大牛们认可。学习 Python 门槛很低，但它的晋级路线很多，通过它你能进入机器学习、数据挖掘、大数据，CS等更加高级的领域。Python可以做网络应用，可以做科学计算，数据分析，可以做网络爬虫，可以做机器学习、自然语言处理、可以写游戏、可以做桌面应用…Python可以做的很多，你需要学好基础，再选择明确的方向。这里给大家分享一份全套的 Python 学习资料，给那些想学习 Python 的小伙伴们一点帮助！
2024-04-30 13:59:52
282
原创 Python爬虫从入门到精通（八）反爬及应对反爬的策略_python怎么解决反爬取
Python崛起并且风靡，因为优点多、应用领域广、被大牛们认可。学习 Python 门槛很低，但它的晋级路线很多，通过它你能进入机器学习、数据挖掘、大数据，CS等更加高级的领域。Python可以做网络应用，可以做科学计算，数据分析，可以做网络爬虫，可以做机器学习、自然语言处理、可以写游戏、可以做桌面应用…Python可以做的很多，你需要学好基础，再选择明确的方向。这里给大家分享一份全套的 Python 学习资料，给那些想学习 Python 的小伙伴们一点帮助！
2024-04-30 13:59:21
366
原创 python爬虫从0到1-Scrapy框架的介绍
Downloader（下载器）：负责下载Scrapy Engine(引擎)发送的所有Requests请求，并将其获取到的Responses交还给ScrapyEngine(引擎)，由引擎交给Spider来处理。Spider（爬虫）：它负责处理所有Responses,从中分析提取数据，获取Item字段需要的数据，并将需要跟进的URL提交给引擎，再次进入Scheduler(调度器)。Item Pipeline(管道)：它负责处理Spider中获取到的Item，并进行进行后期处理（详细分析、过滤、存储等）的地方。
2024-04-30 13:58:07
297
原创 Python中traceback错误堆栈信息处理_python traceback只输出当前堆栈错误
其实traceback.print_exc()函数只是traceback.print_exception()函数的一个简写形式，而它们获取异常相关的数据都是通过sys.exc_info()函数得到的。sys.exc_info()返回的值是一个元组，其中第一个元素，exc_type是异常的对象类型，exc_value是异常的值，exc_tb是一个traceback对象，对象中包含出错的行数、位置等数据。然后通过print_exception函数对这些异常数据进行整理输出。
2024-04-29 03:59:02
870
1
原创 Python中StringIO和BytesIO
这是我花了几天的时间去把Python所有方向的技术点做的整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照上面的知识点去找对应的学习资源，保证自己学得较为全面。基本上主流的和经典的都有，这里我就不放图了，版权问题，个人看看是没有问题的。
2024-04-29 03:58:31
346
1
原创 python中Polars库详解_python polars(1)
我们在看视频学习的时候，不能光动眼动脑不动手，比较科学的学习方法是在理解之后运用它们，这时候练手项目就很适合了，只是里面的项目比较多，水平也是参差不齐，大家可以挑自己能做的项目去练练。这是我花了几天的时间去把Python所有方向的技术点做的整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照上面的知识点去找对应的学习资源，保证自己学得较为全面。函数用于对 DataFrame 中的数据进行分组，并对分组后的数据进行聚合操作。函数用于根据指定的列对 DataFrame 中的数据进行排序操作。
2024-04-29 03:56:48
265
1
原创 Python中Lock和Rlock
锁定共享资源#释放共享资源#锁定共享资源#释放共享资源#调用函数sumOne()sumTwo()在上面的程序中,lock是一个锁对象,全局变量abce是一个共享资源,sumOne()和sumTwo()函数扮作两个线程,在sumOne()函数中共享资源abce首先被锁定,然后增加了1,然后abce被释放。sumTwo()函数执行类似操作。两个函数sumOne()和sumTwo()不能同时访问共享资源abce，一次只能一个访问共享资源。默认的lock不能识别lock当前被哪个线程持有。
2024-04-29 03:56:17
615
1
原创 5 个Python高级应用，你确定知道？_python高级应用学的是啥(1)
Python崛起并且风靡，因为优点多、应用领域广、被大牛们认可。学习 Python 门槛很低，但它的晋级路线很多，通过它你能进入机器学习、数据挖掘、大数据，CS等更加高级的领域。Python可以做网络应用，可以做科学计算，数据分析，可以做网络爬虫，可以做机器学习、自然语言处理、可以写游戏、可以做桌面应用…Python可以做的很多，你需要学好基础，再选择明确的方向。这里给大家分享一份全套的 Python 学习资料，给那些想学习 Python 的小伙伴们一点帮助！
2024-04-28 16:35:29
957
原创 4行Python代码打败美图秀秀(1)
我们平时使用一些图像处理软件时，经常会看到其对图像的亮度、对比度、色度或者锐度进行调整。你是不是觉得这种技术的底层实现很高大上？其实最基础的实现原理，用 Python 实现只需要几行代码，学会后你也可以进行简单的图像增强处理了。
2024-04-28 16:33:46
373
原创 4种更快更简单实现 Python 数据可视化的方法
二维密度图二维密度图（2D Density Plot）是一维版本密度图的直观扩展，相对于一维版本，其优点是能够看到关于两个变量的概率分布。例如，在下面的二维密度图中，右边的刻度图用颜色表示每个点的概率。我们的数据出现概率最大的地方（也就是数据点最集中的地方），似乎在 size=0.5，speed=1.4 左右。正如你现在所知道的，二维密度图对于迅速找出我们的数据在两个变量的情况下最集中的区域非常有用，而不是像一维密度图那样只有一个变量。
2024-04-28 16:32:09
675
原创 大学生业余学习Python是如何挣钱的？_大学生学python能赚外快吗(2)
只有这样才能朝着目标持续前进，少走弯路，从学习中得到不断的提升，享受python学习计划的过程。
2024-04-28 05:27:45
707
原创 大学毕业后迷茫不知所措？三个月学python成功上岸_三个月学会程序开发
为了帮助大家更好的学习Python，小编给大家准备了一份Python学习资料，里面的内容都是适合零基础小白的笔记和资料，不懂编程也能听懂、看懂，需要获取方式：扫描下方即可获取。CSDN大礼包：《Python零基础入门&进阶学习资源包》免费分享。
2024-04-28 05:26:43
880
原创 大厂面试突击——集合篇
哈喽，大家好，我是一条。告诉大家一个消息，我在7月份又离职了，离职后我开始疯狂的面试，一共面了百度、字节、滴滴、美团、陌陌、58同城、汽车之家、元气森林、猿辅导，掌阅科技，美术宝、moka等10多家中大厂，最多的时候一天4面。一、Python所有方向的学习路线Python所有方向的技术点做的整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照下面的知识点去找对应的学习资源，保证自己学得较为全面。二、Python必备开发工具工具都帮大家整理好了，安装就可直接上手！三、最新Python学习笔记。
2024-04-28 05:25:42
271
原创 大佬分享9条秘籍，小白也能用Python赚钱，网友：不早说！
Python容易学，且很多东西仅需要简单的脚本就可以实现，赚钱不一定技术有多叼，有很多东西都可以赚钱的，只要你有资源和心动就可以赚到钱。个人觉得互联网中信息差永远是最容易赚钱的。CSDN大礼包：《python兼职资源&全套学习资料》免费分享🍅 硬核资料：关注即可领取PPT模板、简历模板、行业经典书籍PDF。🍅 技术互助：技术群大佬指点迷津，你的问题可能不是问题，求资源在群里喊一声。🍅 面试题库：由技术群里的小伙伴们共同投稿，热乎的大厂面试真题，持续更新中。🍅 知识体系。
2024-04-28 05:25:12
342
原创 python爬虫的基本原理
请求方式主要有Get,POST两种类型另外还有HEAD，PUT，DELETE，OPTIONS等请求URLURL全称统一资源定位符，如一个网页文档、一张图片、一个视频等都可以用URL唯一来确定。请求头包含请求时的头部信息，如User-Agent，Host，Cookies等信息请求体请求时额外携带的数据如表单提交时的表单数据。
2024-04-27 16:52:33
658
原创 python爬虫爬取豆瓣电影Top250
Win64;#电影名称#电影评分#电影排名#电影海报地址#导演,使用正则movie_director = re.findall(r"导演:(.*?a = “”.join(movie_director).split(“ ”)#因为使用的正则抓取下来的字符串含有 ，使用split()函数进行切分else:#主演，使用正则movie_main_act = re.findall(“主演: (.*)else:#上映日期b = “”.join(movie_datatime)#转化为字符串。
2024-04-27 16:51:02
681
2
原创 OneDNS助力高校行业网络安全(2)
常见的针对的攻击有：Dos&DDos、缓存投毒、服务器劫持、 DNS劫持、DNS欺骗、DNS重绑定等；常见的利用的攻击有：C&C域名、恶意DGA域名、恶意软件、 钓鱼网址、色情网址、黑产广告网址等。传统的DNS只提供解析服务，但我们并不知道解析性能怎么样，出了问题也很难发现，同时还有DNS流量劫持等风险。
2024-04-27 05:48:45
631
原创 Numpy概述(学习笔记)
例：注：补充知识%%time 将会给出cell(一个单元格里面所运行的内容)的代码运行一次所花费的时间。%time 将会给出当前行的代码运行一次所花费的时间。%timeit 使用Python的timeit模块，它将会执行一个语句100，000次(默认情况下)，然后给出运行最快3次的平均值。ls"_"是一个循环标志，类似于普通变量，只是不取值，只循环，这个"_"其实就是一个占位符，和用普通变量i但是不使用i是一样的效果。%%time。
2024-04-27 05:47:44
970
原创 Numpy库速通教程典藏版 #一篇就够了系列(1)
也可以是一个正整数，是正整数的话则表示从[0, a)的整数中随机抽取。size 即shape，元组。也可以是一个数字，表示一维数组。replace 是否有放回。默认为True是有放回的抽取。p 抽取到的概率。默认为None，表示所有元素抽取到的概率相等。也可以是一个数组，是数组的话，该数组的shape应与参数a数组的shape相同。该数组中的每个元素对应着数组a中相同位置的每个元素被抽取到的概率。print(“从[0,100)中随机抽取一个整数”)print(“从data中随机抽取一个数字”)
2024-04-27 05:46:40
576
原创 NOJ南邮上机 求最值问题PROB1002 Python
对每组数据输出一行，包含两个整数，用一个空格隔开，分别表示 N�个数中的最大值和最小值。
2024-04-27 05:46:10
104
原创 重学计算机组成原理-计算机总线详解(1)
当我学到一定基础，有自己的理解能力的时候，会去阅读一些前辈整理的书籍或者手写的笔记资料，这些笔记详细记载了他们对一些技术点的理解，这些理解是比较独到，可以学到不一样的思路。Python所有方向的技术点做的整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照下面的知识点去找对应的学习资源，保证自己学得较为全面。总线上可能挂接多个设备，为了解决总线控制权的竞争问题，必须有总线仲裁部件，以某种规则裁决、分配总线的控制权。芯片内部的总线，寄存器与寄存器之间，寄存器与控制器、运算器之间。
2024-04-27 01:18:11
263
原创 都在发做圣诞树，我来点不一样的，用python给对象戴一顶圣诞帽
但是圣诞节又要到了，那必须安排，高低得整两手~于是灵机一动，圣诞老头不是还有顶帽子吗？这不得给对象也来一顶圣诞帽。啊这…这颜色不太对劲喔 不对，圣诞帽咱应该是红色的那这个就送给你们吧…普通人都是PS批图，咱们不一样，作为技术人员，咱们得自己写程序实现，这不比P图有意思？那今天就探索一下用 Python 来自动给女朋友照片添加圣诞帽吧~什么？只想要软件？二、流程思路既然是要做成一个软件，那么首先要写界面才能操作。然后准备一张女朋友和一顶圣诞帽子的图片~什么 没有女朋友？emmmm…
2024-04-27 01:17:40
234
原创 都下班了老板让我做一个可视化报表，还好我会Python，分分钟就完成了
不知道你们用的什么环境，我一般都是用的Python3.6环境和pycharm解释器，没有软件，或者没有资料，没人解答问题，都可以免费领取（包括今天的代码），过几天我还会做个视频教程出来，有需要也可以领取~给大家准备的学习资料包括但不限于：Python 环境、pycharm编辑器/永久激活/翻译插件python 零基础视频教程Python 界面开发实战教程Python 爬虫实战教程Python 数据分析实战教程python 游戏开发实战教程Python 电子书100本。
2024-04-27 01:17:10
649
原创 Python接外包养无敌可爱的她，每天都随便花~
今天来给大家展示一下用python采集一下外包网站~作为一个程序员，要有会用自己的技术创造价值的自觉~
2024-04-26 14:13:49
152
原创 Python接口自动化 —— token登录（详解）_token接口
Token是服务端端生成的一串字符串，作为客户端进行请求时辨别客户身份的的一个令牌。当用户第一次登录后，服务器生成一个Token便将此Token返回给客户端，以后客户端只需带上这个Token前来请求数据即可，无需再次带上用户名和密码。2、使用Token的目的：Token的目的是为了验证用户登录情况以及减轻服务器的压力，减少频繁的查询数据库，使服务器更加健壮。
2024-04-26 14:13:18
264
原创 Python打牢基础，从12个语法开始！_python打牢基础,从12个语法开始!
现在能在网上找到很多很多的学习资源，有免费的也有收费的，当我拿到1套比较全的学习资源之前，我并没着急去看第1节，我而是去审视这套资源是否值得学习，有时候也会去问一些学长的意见，如果可以之后，我会对这套学习资源做1个学习计划，我的学习计划主要包括规划图和学习进度表。**因为对于同一个时刻，不同人的描述可能不同，毕竟文本的形式千变万化，而时间戳使得时间的表达得到了统一，每个时刻只能用唯一的整数或浮点数来表示，同时也便于计算时间差这样的处理。在处理数据时，很多地方都会涉及到时间，例如数据产生的时间。
2024-04-26 14:12:47
291
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人