shadowtalon的博客

原创 Python库之pandas的高级用法深度解析

pandas 的高级用法为数据分析提供了强大的工具和方法。从复杂的数据选择与过滤、数据分组与聚合、时间序列分析、数据透视表、缺失数据处理、数据转换、文件读写、性能优化到类别数据优化，pandas 的高级功能可以帮助数据科学家和分析师处理各种复杂的数据分析任务。掌握这些高级用法，可以显著提高数据处理的效率和质量。

原创 Python库之pandas的简介、安装、使用方法详细攻略

pandas 是 Python 数据分析领域的核心库之一，它提供了丰富的功能来处理和分析数据。通过本文的介绍，你应该已经了解了如何安装 pandas，以及如何使用它进行数据读取、查看、选择、清洗、转换、合并、时间序列处理、数据分组、数据透视表创建和文件输出等操作。pandas 的强大功能使得它成为数据科学家和分析师不可或缺的工具之一。

原创 Python库之pyautogui的高级用法深度解析

pyautogui是一个功能强大的自动化库，它的高级用法可以满足复杂的自动化需求。通过屏幕图像搜索、多屏幕支持、滚动和拖动、监听键盘和鼠标事件、定时任务、异常处理以及性能优化等高级功能，pyautogui可以帮助开发者创建更加强大和灵活的自动化脚本。在使用这些高级功能时，需要注意异常处理和性能优化，以确保脚本的稳定性和效率。

原创 Python库之PyAutoGUI的简介、安装、使用方法详细攻略

PyAutoGUI 是一个功能强大的自动化库，它提供了丰富的方法来控制鼠标和键盘。通过本文的介绍，你应该已经了解了如何安装和使用 PyAutoGUI 来实现基本的自动化操作。在实际应用中，你可以根据自己的需求来编写更复杂的自动化脚本。

原创 Python库之Scrapy-Redis的高级用法深度解析

Scrapy-Redis使用来过滤重复的请求。你可以通过继承类来自定义过滤逻辑。# 自定义请求指纹生成逻辑然后在Scrapy-Redis允许你自定义调度器，以适应不同的爬取策略。设置自定义调度器创建一个继承自的类，并实现所需的方法。在中指定自定义调度器Scrapy-Redis的高级用法为爬虫开发提供了极大的灵活性和扩展性。通过自定义DupeFilter、调度器、动态控制爬取、利用Redis数据结构、负载均衡以及监控与日志，你可以构建高效、稳定且易于维护的分布式爬虫系统。

原创 Python库之Scrapy-Redis简介、安装、使用方法详细攻略

Scrapy-Redis是Scrapy框架的一个强大扩展，它利用Redis的高性能和分布式特性，使得Scrapy爬虫能够轻松实现分布式处理。通过简单的配置和代码修改，就可以将一个普通的Scrapy爬虫转变为一个高效的分布式爬虫。

原创 Python库之Playwright高级用法深度解析

Playwright是一个功能丰富、灵活的自动化库，它的高级用法可以帮助开发者解决复杂的自动化测试问题。本文介绍了Playwright的一些高级用法，包括浏览器上下文、选择器引擎、网络监听、模拟网络条件等。通过这些高级用法，您可以更有效地利用Playwright进行Web自动化测试。请注意，本文中的示例代码使用了Playwright的同步API，适合简单的脚本和学习目的。对于生产环境，推荐使用异步API以提高性能和效率。此外，Playwright的文档和社区资源非常丰富，是学习和解决问题的宝贵资料。

原创 Python库之Playwright简介、安装、使用方法详细攻略

跨浏览器测试：支持Chrome、Firefox和Safari。跨平台测试：支持Windows、Linux、macOS。网络交互：支持拦截、修改网络请求。文件上传下载：支持文件的上传和下载操作。屏幕截图和PDF：可以捕获页面截图或生成PDF。视频录制：可以录制浏览器会话。Playwright是一个功能强大且易于使用的自动化库，它为自动化测试提供了丰富的API。通过上述的安装和使用方法，您可以快速上手Playwright，为您的自动化测试项目增添动力。

原创 Python库之retrying的高级用法深度解析

通过参数，你可以指定只在特定类型的异常发生时才进行重试。# 只有当发生IOError时才会重试pass。

原创 Python库之retrying的简介、安装、使用方法详细攻略

默认情况下，retry装饰器会在任何异常时触发重试。但你可以通过stop和wait参数来自定义重试的条件和等待时间。"""重试条件装饰器"""try:raise# 这里可以是任何可能失败的操作# 函数将在遇到异常时等待2秒后重试，最多重试3次。

原创 Python库之PyQuery的高级用法深度解析

PyQuery是一个强大的Python库，它提供了类似于jQuery的语法来解析和操作HTML和XML文档。虽然PyQuery的基本用法已经相当直观，但本文将深入探讨一些高级用法，帮助开发者更高效地处理复杂的HTML文档。

原创 Python库之PyQuery的简介、安装、使用方法详细攻略

PyQuery是一个强大的库，它提供了一种简单的方式来处理HTML文档。它使得Python中的HTML操作变得直观和易于理解，特别是对于那些熟悉jQuery的开发者来说。通过上述的使用方法，你可以开始使用PyQuery来解析和操作HTML文档了。

原创 Python库之Scrapy的高级用法深度解析

Spiders：负责解析响应并提取数据，生成Item。Items：用于定义爬取的数据结构。Pipelines：处理Spider返回的Item，如清洗、验证、存储到数据库等。Engine：控制整个爬虫的数据流处理。Downloader：负责下载网页内容。Scheduler：调度下载任务，排队等待下载。：处理引擎与下载器之间的请求和响应。Scrapy作为Python中一个非常流行的爬虫框架，其高级用法可以极大地提升爬虫的性能和效率。

原创 Python库之Scrapy的简介、安装、使用方法详细攻略

在Scrapy中，Item是一个Python类，用于定义爬取的数据结构。编辑文件来定义你的Item。# 定义其他字段...Scrapy是一个功能强大的爬虫框架，它提供了丰富的特性来简化爬虫的开发和维护。通过本文的介绍，你应该能够安装Scrapy、创建项目、定义Item、编写Spider、运行爬虫以及存储数据。Scrapy的学习曲线可能稍微陡峭，但一旦掌握，它将大大提高你的爬虫开发效率。

原创 Python库之selenium的高级用法深度解析

持续集成（CI）是一种软件开发实践，通过自动化构建和测试来确保代码的质量。Selenium作为一个成熟的自动化测试工具，其强大的功能和灵活性使其在自动化Web测试领域占据重要地位。随着Web技术的不断发展，Selenium也在不断更新和改进，以适应新的测试需求。同时，新的工具如Puppeteer和Playwright也在为用户提供更多的选择。无论选择哪种工具，自动化测试的核心目标——提高软件质量、减少重复工作、加快测试速度——是不变的。

原创 Python库之selenium的简介、安装、使用方法详细攻略

Selenium是一个功能丰富的工具，它不仅可以用于自动化测试，还可以用于自动化网页交互和数据抓取。通过掌握Selenium的基本和高级用法，你可以构建强大的自动化脚本，提高工作效率。记得在使用Selenium时，要遵守网站的使用条款，尊重网站的版权和隐私政策。

原创 Python库之re的高级用法深度解析

深入理解re模块的高级用法，可以帮助你更有效地处理复杂的文本匹配和处理任务。记住，正则表达式是一种强大的工具，但也需要谨慎使用，以避免造成不必要的性能问题。

原创 Python库之re的简介、安装、使用方法详细攻略

re模块是Python中处理文本的强大工具，通过正则表达式，你可以执行复杂的文本匹配、搜索、替换和分割操作。掌握正则表达式的基本语法和re模块的使用方法，将大大提高你在文本处理方面的效率和灵活性。

原创 Python库之Beautifulsoup的高级用法深度解析

Beautiful Soup默认使用Python内置的，但也支持其他解析器，如lxml的解析器，这可以提高解析速度并解决一些解析问题。# 使用lxml的解析器。

原创 Python库之Beautifulsoup的简介、安装、使用方法详细攻略

Beautiful Soup是Python的一个用于解析HTML和XML文档的库，它能够通过你喜欢的解析器来自动将繁杂的HTML或XML文档转换成易于使用的数据结构。Beautiful Soup的速度非常快，而且非常灵活，支持多种解析器，如Python标准库中的HTMLParser，以及第三方库lxml和html5lib。

原创 Python库之`lxml`的高级用法深度解析

lxml是一个功能强大的第三方库，它提供了对XML和HTML文档的高效处理能力。除了基本的解析和创建功能外，lxml还包含了一些高级用法，这些用法可以帮助开发者在处理复杂文档时更加得心应手。

原创 Python库之lxml的简介、安装、使用方法详细攻略

详细解释HTTP请求头可以携带额外的信息，如用户代理、认证信息、内容类型等。在requests中，你可以通过headers参数自定义这些请求头。q=0.5',详细解释除了表单数据和文件，requests还允许你发送自定义的请求体，比如JSON格式的数据。这在使用API时特别有用，因为许多API都要求使用JSON格式。data = {本文详细介绍了requests。

原创 Python库之`requests`的高级用法深度解析

详细解释HTTP请求头可以携带额外的信息，如用户代理、认证信息、内容类型等。在requests中，你可以通过headers参数自定义这些请求头。q=0.5',详细解释除了表单数据和文件，requests还允许你发送自定义的请求体，比如JSON格式的数据。这在使用API时特别有用，因为许多API都要求使用JSON格式。data = {本文详细介绍了requests。

原创 Python库之requests的简介、安装、使用方法详细攻略

requests库是Python中处理HTTP请求的利器，它简洁的API设计使得发送HTTP请求变得非常简单。无论是简单的GET请求还是复杂的POST请求，甚至是文件上传和JSON解析，requests都能轻松应对。掌握requests的使用，将大大提高你在网络编程方面的效率。希望这篇文章能帮助你快速上手requests库，如果你有任何疑问或者想要了解更多高级用法，欢迎继续探索requests的官方文档。

原创 h5最新mtgsig1.1成品

h5最新mtgsig1.1成品。

原创 某麦网apk出票接口加密参数分析（一）

当下的一些火爆活动，如音乐节、演唱会等需要购买门票的活动，常常会引发一些网络抢票软件的出现。而某麦网也不例外，很多人使用抢票软件来抢购某些活动的门票。为了防止这种情况的出现，某麦网增加了接口加密参数，让抢票软件无法直接调用网站接口，从而保证正常用户的购票权益。那么下面我将介绍某麦网apk抢票接口加密参数的分析过程，希望对大家有所帮助。

原创 浅浅记录一下对某音的X-Agus、X-Gorgon、X-Khronos、X-Ladon研究（仅学习使用）

前两年也对这个app进行了研究，那时候还没有什么加密参数。那说明该app java层面可能没有写相关的字符串。于是我hook了一下这个类的toString方法。发现该app走的不是正常的http/s协议。于是我hook了传输协议 就可以正常抓包了。近期比较闲，于是对该app进行了逆向研究。下面找到了加密点 那逆向起来就方便了。就找到了加密的方法，还是比较简单的。然后我用jadx反编译了该app。抓包后就发现多了好几个加密参数。变换参数之后就不能正常请求了。因此只能进行对app的逆向。

原创 聊一聊Python爬虫

其中，requests库用于发送HTTP请求，BeautifulSoup库用于解析HTML和XML文档，Scrapy是一款高效、灵活的网络爬虫框架，可用于大规模数据采集。Python爬虫技术的应用非常广泛，随着大数据和人工智能等技术的发展，Python爬虫技术的前景也越来越广阔。3.数据分析和挖掘：爬虫可以采集和整理大量的数据，用于数据分析和挖掘，例如社交媒体数据分析、航空航班数据分析等。5.反爬虫：爬虫也可以用于反爬虫，即通过构建爬虫的技术手段来识别和阻止恶意爬虫，保护网站数据的安全性和完整性。

原创 某饿了么APP最新版逆向分析（二）：加密参数初探

我们的请求参数发生了改变，也要发送正常的加密后的参数才能获取到我们需要的数据。第二步全局搜索x-sign参数，发现整个app只有几个地方是有这个字符串的。因为app还蛮大的，所以我对jadx的使用内存进行了修改，扩大了内存。第一步当然是需要反编译了，因此我用jadx对app进行了反编译。搜索出来的结果不多，那我们分析起来也就简单多了。经过几分钟的分析 就能定位到我们需要的加密处。说做就做，这边用的python进行模拟请求。明明请求的内容和抓包的内容完全一致。就能正常返回我们需要的数据了。

原创 某饿了么APP最新版逆向分析（一）

某饿了么App最新版逆向分析（一）

原创 基于c/c++的顺序表元素的插入和删除，以静态分配的方式，完整代码

数据结构

原创 美团商超药店成品

美团商超药店成品

原创 h5最新mtgsig成品

某团外卖h5最新mtgsig

原创 案例1 按钮的使用技巧

案例1 按钮的使用技巧在本案例中，将介绍Button按钮的使用技巧【实例描述】​ Button按钮是最常见的控件，本程序主要是添加一个button按钮，单击该按钮会弹出Toast提示，运行效果图如下。【代码解析】首先，在activity_main.xml中将主界面开发``<?xml version="1.0" encoding="utf-8"?><LinearLayout xmlns:android="http://schemas.android.com/apk/res/

原创 零基础学Android开发系列

目标：沉浸了这么久，准备写点文章，在写文章的同时，巩固Android开发的基础知识，每天一个Android小案例，从零带领大家开发简单的Android应用。

原创 极验三代四代成品

极验三代四代成品

原创 Python零基础学习路线（2022最新版）

带你快速入门

原创 某音APP xgorgon参数

评论抓取 搜索接口等

原创 淘系x-sign api接口

原创 某淘系直播APP x-sign成品 hook算法