
python爬虫自动化
文章平均质量分 67
python爬虫自动化
愚公搬代码
《头衔》:华为云特约编辑,华为云云享专家,华为开发者专家,华为产品云测专家,CSDN博客专家,CSDN商业化专家,阿里云专家博主,阿里云签约作者,腾讯云优秀博主,腾讯云内容共创官,掘金优秀博主,亚马逊技领云博主,51CTO博客专家等。
《近期荣誉》:2022年度博客之星TOP2,2023年度博客之星TOP2,2022年华为云十佳博主,2023年华为云十佳博主,2024年华为云十佳博主等。
《博客内容》:.NET、Java、Python、Go、Node、前端、IOS、Android、鸿蒙、Linux、物联网、网络安全、大数据、人工智能、U3D游戏、小程序等相关领域知识。
展开
-
【愚公系列】2022年01月 python爬虫自动化-ABD连接安卓设备进行抓包
文章目录一、开发者模式二、测试连通性三、查找包名四、抓取app包的数据请求1,抓取socket请求:2.抓取http或者https请求 一、开发者模式 打开手机开发者模式-》点击允许wifi调试或USB调试 二、测试连通性 输入adb devices查看刚刚连接的设备 三、查找包名 输入adb shell 进入刚刚连接的device的shell,再输入pm list packages查看安卓设备安装了哪些包 也可以根据关键字查找包名pm list packages | grep tencent 四、抓原创 2022-01-01 13:59:34 · 36692 阅读 · 2 评论 -
【愚公系列】2021年12月 python爬虫自动化-爬虫环境搭建
文章目录一、数据的来源1. 企业产生的用户数据2. 数据平台购买数据:3. 政府、机构公开的数据:4. 数据管理咨询公司:埃森哲,麦肯锡5. 爬虫爬取二、爬虫所需要的库:1. urllib 标准库,无需安装,直接 import 使用2. requests 库,需要安装3. selenium 库,需要安装4. phantomJS ,官网下载5. re #正则,标准库,不需要安装6. BeautifulSoup,html/xml 解析库,需要安装7. pyquery(可选)解析库,语法与 JQuery 类似8.原创 2021-12-18 20:01:58 · 36411 阅读 · 0 评论 -
【愚公系列】2021年12月 python爬虫自动化-WEditor自动化APP测试工具安装和使用
文章目录一、WEditor是什么?二、使用步骤1.安装2.运行3.安卓设备连接总结 一、WEditor是什么? WEditor是基于python的查看APP元素的工具,能够提供辅助编写脚本,定位元素,调试代码等功能。 二、使用步骤 1.安装 pip install weditor 2.运行 python -m weditor 会自动打开如下网页:http://localhost:17310 3.安卓设备连接 window11下载adb设备:https://adb.clockworkmod.com/原创 2021-12-07 21:47:43 · 35729 阅读 · 0 评论