bug山下的孙小空-CSDN博客

原创简单Python爬虫案例，带你掌握xpath数据解析方法

文章目录 xpath基本概念 xpath解析原理环境安装如何实例化一个etree对象： xpath(‘xpath表达式’) xpath爬取58二手房实例爬取网址完整代码效果图 xpath图片解析下载实例爬取网址完整代码效果图 xpath爬取全国城市名称实例爬取网址完整代码效果图 xpath爬取简历模板实例

2022-04-29 14:43:37 1555 1

原创有点意思的Python，让你分分钟起飞

关于Python有一句名言：不要重复造轮子。但是问题有三个：1、你不知道已经有哪些轮子已经造好了，哪个适合你用。有名有姓的的著名轮子就400多个，更别说没名没姓自己在制造中的轮子。2、确实没重复造轮子，但是在重复制造汽车。包括好多大神写的好几百行代码，为的是解决一个Excel本身就有的成熟功能。3、很多人是用来抓图，数据，抓点图片、视频、天气预报自娱自乐一下，然后呢？抓到大数据以后做什么用呢？比如某某啤酒卖的快，然后呢？比如某某电影票房多，然后呢？我认为用Python...

2022-04-25 21:57:12 543 2

原创识别速度3.6ms/帧,人像抠图、工业质检、遥感识别，用这一个分割模型就够了

支撑影视人像抠图、医疗影像分析、自动驾驶感知等万亿级市场背后的核心技术是什么？那就要说到顶顶重要的图像分割技术。相比目标检测、图像分类等技术，图像分割需要将每个像素点进行分类，在精细的图像识别任务中不可替代，也是智能视觉算法工程师拥有关键核心竞争力的关键！图1 图像分割应用正因如此，DeepLabv3、OCRNet、BiseNetv2、Fast-SCNN等优秀算法层出不穷，然而在实际产业落地过程中往往需要综合考虑硬件性能、精度等多方面因素，对算法的需求也是苛刻的。往往业界算法在保障高识别精度的.

2022-04-25 21:07:11 388

原创 20 行 Python 代码实现加密通信

一、引言网络上充满了窃听，我们的信息很容易被不怀好意的人获得，给我们造成不好的影响。如果你需要在网络上传输机密或者敏感的隐私信息，为了防备别有用心的人窃听，可能需要加密。而使用在线或者手机上的加密软件，可能不良软件更是泄露信息的温床。所以作为程序员的我们，完全可以自己来实现一个加密系统。本文用 20 行 Python 代码来演示加密、解密、签名、验证的功能。大家依样画葫芦，不仅能理解加密技术，更能自己实现一套加密通信机制。加密、解密建立在较高深的数学理论之上，不建议大家自己实现加密算...

2022-04-12 16:54:11 647

原创 python爬虫框架scrapy案例分析

1.生成项目scrapy提供一个工具来生成项目，生成的项目中预置了一些文件，用户需要在这些文件中添加自己的代码。打开命令行，执行：scrapy startproject tutorial，生成的项目类似下面的结构tutorial/ scrapy.cfg tutorial/ __init__.py items.py pipelines.py settings.py spiders/ ...

2022-04-06 20:46:42 2454

原创刚开始学习也能用Python网络爬虫进行多线程采集高清游戏壁纸

一、背景介绍大家好，我是孙小空。对于不同的数据我们使用的抓取方式不一样,图片,视频,音频,文本,都有所不同,由于网站图片素材过多,所以今天我们使用多线程的方式采集某站4K高清壁纸。二、页面分析目标网站:http://www.bizhi88.com/3840x2160/如图所示，有278个页面,这里我们爬取前100页的壁纸图片，保存到本地；解析页面如图所示所有的图片都在一个大盒子里面（）,下面每一个div就对应一张高清壁纸；然后每页div标签里面的壁纸图

2022-04-02 20:42:41 5206