fake_UA-CSDN博客

原创 Downloader Middleware

downloader middleware作用：改写请求，如加入代理，加入头部等；处理异常等。# downloadMiddleware举例, 加代理# 这里的类如果已经重新设置名称,记得在settings里面开启的时候改成这个名称class ProxyMiddleware(object): # logging模块负责输出调试信息,记录程序错误等 logger = logging.getLogger(__name__) # process_request如果返回 # 1

2020-11-10 16:42:30 239

原创使用 ffmpeg 合成视频音频

python 使用 ffmpeg 合成视频音频下载ffmpeg.exe在python里安装ffmpeg库def combine(self, dirname, cp_vid, video_file, audio_file, out_file):“”"将视频和音频合成:param video_file: 视频路径:param audio_file: 音频路径:param out_file: 合成后的文件路径:return: 判断标识“”"try:# cmd的执行视频合成命令#

2020-10-28 16:31:48 928

原创滑块验证

需要安装库 cv2pip install opencv python实现过程:1.下载滑块验证check_slide.py# -*- coding: utf-8 -*-from selenium import webdriverimport requestsfrom main import SlideCrackfrom lxml import etreeimport timefrom selenium.webdriver.support.ui import WebDriverWait

2020-10-15 00:58:44 1221

原创 redis

MyRedis.pool = redis.ConnectionPool(host=host, port=port, db=r_db)进入redisredis-cls -h ip -p 端口semember id :查看redis集合keys id:查看id 支持正则*

2020-09-24 12:52:03 163

原创随记

linux:crontab定时器的使用crontab -e编辑定时器 -l查看定时器列表tail -f /var/log/cron 监控近期的定时任务hopub python ./1.py >/dev/null 2&1&

2020-09-22 20:25:27 115

原创 yaml

"""实例化连接一个数据库""" db_conf = yaml.load(open(ROOT_PATH + '/News/config/db.yaml', 'rb'), Loader=yaml.FullLoader).get(KIS_ENV) host = db_conf.get('host') user = db_conf.get('user') password = db_conf.get('password') port = db_conf.get('p...

2020-09-18 11:15:35 113

原创 python 解决gb2313乱码

正常requests请求:response.encoding = response.apparent_encodingstr_res = etree.HTML(response.text)scrapy.Request请求response.body.decode(response.encoding)str_res = etree.HTML(response.text)

2020-09-17 16:02:22 589 1

原创 python request请求gb2313编码的网页乱码

response = requests.get(url, headers=headers)res = response.text.encode(response.encoding)str_res1 = etree.HTML(res.decode(‘gb2312’))能正常使用xpath

2020-09-15 19:21:07 181

原创 python标准库

常用的python标准库有哪些模块:os 操作系统模块time 时间模块pickle 序列化模块pymysql 数据库模块threading 线程模块multiprocessing 协程模块queue 队列模块第三方库:django 和 flaskrequestsselenuimscrapylxmlrexadminhashlicmd5virtualenv常用的科学计算库 :Numpy,Scipy,Pandas...

2020-09-13 15:55:30 100

原创 PHP连接mysql

php连接mysql版本区别php7之前是mysql连接,之后是mysqli连接连接步骤链接数据库判断是否连接成功设置字符集选择数据库准备sql语句发送sql语句处理结果集关闭数据库(释放资源)<?php $link = mysqli_connect('localhost','root','mysql'); if(!$link){ exit('数据库连接失败'); }else{ echo '数据库连接成功...'; } mysqli_set_ch

2020-07-22 19:24:28 282

原创 mysql

MySQL进入mysql : win+r 输入cmd打开终端mysql -uroot -p 输入密码(提示不是内部变量,加bin目录环境变量)数据库操作show databases; 查看数据库create database name; 创建数据库drop database name; 删除数据库use name; 使用数据库select database(); 查看当前所在数据库表操作show tables; 查看表create table name

2020-07-22 19:23:36 236

原创 PHP时间模块及其他

时间函数<?php $time = time(); //时间戳1594375974 $strtime = date('Y-m-d H:i:s',$time); //2020-07-10 10:16:55 echo $strtime.'<br />'; //调整时区 date_default_timezone_set('PRC'); //第二种改配置文件php.ini //date.timezone ="PRC" $time1 = time(); $strtime1

2020-07-22 19:22:19 104

原创 PHP数组

循环控制<?php$arr = [3=>'a',1,3,2,5];var_dump($arr);/*从3开始存 array (size=5) 3 => string 'a' (length=1) 4 => int 1 5 => int 2 6 => int 3 7 => int 6*///关联数组,类似字典$arr1 = [ 'java' => [ 3=>'a',1,3,2,5 ],

2020-07-22 19:20:35 89

原创 PHP流程控制

流程控制if elseif (条件) { 循环语句}esle if (条件) { 循环语句}else{ 循环语句}switch<?php; $num = mt_rand(1,3); //在123中间取,两边都取 switch($num) { case 1 : echo '1'; break; case 2 : echo '2'; break; case 3 : echo '3';

2020-07-22 19:19:04 96

原创 PHP函数

函数外部变量不能再函数内使用,内部变量不能再函数外使用超全局变量外部变量和内部变量是同一个变量$_GET $_POST $_FILE $_COOKIE $_SESSION $GLOBALS形参约束<?php function sum(int $num1,int $num2):string { return $num1 + $num2; } sum('1','2'); //字符串'3' function arr(...$arr){

2020-07-22 19:16:20 129

原创 PHP数据类型

数据类型标量整型浮点型布尔类型字符串混合类型数组 array$arr = [1,2,3] 对象 object特殊类型空 null 资源 resource数据类型转换<?php $str = '13.a' echo intval($str) //13 //intval,strval,boolval,floatval //gettype 获取类型 //var_dump 输出值和类型 //nul

2020-07-22 19:14:31 96

原创 php基础知识(一)

基本格式:// 以utf-8编码bom格式,命名以.php结尾<?php //注释,句子以分号结尾,最后一句可以不带 echo 111; /* 需要将php.ini配置修改short_open_tag = On */<? $x = '短标签'; echo x;>变量:以$开头命名规范:以$开始,后面可以接英文字符严格区分大小写不要以数字和特殊符号开头,除下划线_可以用中文但是不推荐数字可以在中间或结尾变量

2020-07-22 19:12:59 126

fake_UA的博客