![](https://img-blog.csdnimg.cn/20201014180756757.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
python
文章平均质量分 51
崔子末
只要你不想生活底头,就不会有人会打败你.
展开
-
某车点选验证码逆向实战
文字点选验证码逆向,原创 2024-04-19 23:44:26 · 625 阅读 · 0 评论 -
使用python获取当前时间是当月的第几天
使用python获取当前时间是当月的第几天原创 2022-09-23 11:13:35 · 1157 阅读 · 2 评论 -
某短剧小程序付费视频采集
微信短剧付费视频采集原创 2022-09-05 17:20:31 · 4320 阅读 · 12 评论 -
linux下部署selenium爬虫程序
文章目录前言一、selenium是什么?二、使用步骤1.引入库2.测试代码三、部署程序1.安装chrome2.安装chromedriver驱动3.运行测试代码总结前言提示:我这里是工作需要把selenium 爬虫程序部署到Linux 服务器上面 顺便跟大家交流一下 如果有兴趣的话可以看一下,一、selenium是什么?示例:Selenium是一个用于Web应用程序测试的工具。Selenium测试直接运行在浏览器中,就像真正的用户在操作一样, 爬虫用它来抓取一些js动态加载的数据二、使用步骤.原创 2021-11-24 14:36:06 · 4084 阅读 · 12 评论 -
Python 浅拷贝和深拷贝
1、浅拷贝浅拷贝是对一个对象的顶层拷贝通俗的理解就是:拷贝了引用,并没有拷贝内容列如;2 深拷贝深拷贝是对于一个对象所有层次的拷贝(递归)列如;...原创 2019-01-06 19:49:14 · 98 阅读 · 0 评论 -
scrapy 爬虫的部署以及gerapy使用
scrapy部署介绍相关的中文文档地址https://scrapyd.readthedocs.io/en/latest/安装相关库scrapyd是运行scrapy爬虫的服务程序,它支持以http命令方式发布、删除、启动、停止爬虫程序。而且scrapyd可以同时管理多个爬虫,每个爬虫还可以有多个版本pip3 install scrapydscrapyd-client发布爬虫需要使用另一...原创 2019-09-22 19:36:41 · 364 阅读 · 0 评论 -
scrapy_redis使用后小总结
为什么要用呢;Scrapy_redis在scrapy的基础上实现了更多,更强大的功能,具体体现在:reqeust去重,爬虫持久化,和轻松实现分布式首先安装:pip3 install scrapy-redis如果这样不可以的话 加镜像源试一下哦:-i https://pypi.douban.com/simple搞定 看下一步:Scrapy-redis提供了下面四种组件(compon...原创 2019-09-22 18:51:17 · 192 阅读 · 0 评论 -
BeautifulSoup4 和 pyquery 的基本用法
CSS选择器:BeautifulSoup4啰嗦一下 我们安装 pip install BeautifulSoup4 #如果安装慢 或者报错的话不如在最后面加一个镜像源试一试 -i https://pypi.douban.com/simple解决一个疑问 BeautifulSoup4是什么东西呢?Beautiful Soup 和 lxml 一样,Beautiful Soup...原创 2019-09-10 19:58:45 · 470 阅读 · 0 评论 -
requsets请求方式和xpath解析器的基本用法
requestsPython的标准库中 urllib 模块已经包含了平常我们使用的大多数功能,但是它的 API 使用起来让人感觉不太好,Requests 继承了urllib的所有特性,并且API使用更加方便,可以简化我们的代码首先安装pip3 install requests它有两种请求方式:get 和 postget示例代码url = "https://xueqiu.com/v4/s...原创 2019-09-09 17:32:35 · 558 阅读 · 0 评论