sydjcwx

browser.get(‘https://www.baidu.com/’)time.sleep(5)aa = browser.find_element_by_xpath(’//input[@type=“submit”]’).get_attribute(‘value’)print('aa = ', aa)2.百度热榜bb = browser.find_element_by_xpath(’//div[@class=“title-text c-font-medium c-color-t”]...

1. unittestreport文档链接：http://testingpai.com/article/1598939124642

**1.**正确理解Python中的 @staticmethod@classmethod方法https://zhuanlan.zhihu.com/p/28010894

python 包：from h3 import h3def geth3(lon, lat, levelnum): h3_address = h3.geo_to_h3(lat, lon, levelnum) # 纬度，经度，地块级别 hex_center_coordinates = h3.h3_to_geo(h3_address) hex_boundary = h3.h3_to_geo_boundary(h3_address) return h3_addresslo

# encoding=utf-8'''比较两个字典不同之处会返回两个数据所有不同之处返回格式：list说明：list长度即为总共有几处不同返回结果格式参考：[{'message': '有value值不同', 'key': 'paxFeeNoPool', 'value': [10536, 10535]},{'message': 'a(旧数据）里此list中有数据不存在于 b（新数据）', 'key': 'amountFee', 'value': {'a': 3}}]'''import

1.“content-type”: "application/x-ndjson"data = ‘’’{“index”:[“soa-info-fat*”],“ignore_unavailable”:true,“preference”:1616726062657}{“version”:true,“size”:500,“sort”:[{“logTime”:{“order”:“desc”,“unmapped_type”:“boolean”}}}‘’’不要用–> data = ‘
’.join(js

```python# -*- coding: utf-8 -*-from smallvideo.settings import mysql_host, mysql_password,mysql_user,mysql_port,mysql_dbfrom smallvideo.utils.logUtil import logDebugimport pymysqlimport tracebackimport threadingmutex = threading.Lock()class Mys.

环境：win101. 安装配置nodejs首先下载好nodejs官网地址： https://nodejs.org/en/下载LTS版， .msi结尾的安装包双击此安装包，一路点击next，直至安装完成。默认会安装到 C:\Program Files
odejs 下，并且会自动添加环境变量。安装完成之后，进入cmd命令行，输入node -v 和 npm -v，会出现对应的版本号，即为成功。如图：如果选择默认安装路径，以后下载模块依赖的话也会存到c盘，为避免占用c盘空间，可以进行如下操作：

环境：macbook + pycharm前端用vue写，后端用tornado写，python语言记录：第一次用vue，git clone 下来vue代码之后，想在本地pycharm里边写，结果一写就报红，感觉就老是格式错误，其实不是格式错误，只是pycharmm里启用额格式检查工具导致的，如下图，只需要关掉就行了使用 fetch发送请求，方式是post，tornado接口也支持post方式。vue里mode: "cors"时，直接在页面输入框填写，然后点击提交，控制台看见直接报错，到不了后端接

1.安装brewbrew 是 Mac 下的一个包管理工具，作用类似于 centos 下的 yum。brew 可以用一条命令，就可以在mac上安装、卸载、更新各种软件包。安装命令：/usr/bin/ruby -e “$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/master/install)”如果提示你：Failed to connect to raw.githubusercontent.com port 443: Co

开工第一抽，呀，红色毛爷爷笑哈哈。开工第二造，完善造券兑券流程，支持双环境，双业务线，双角色。开工第三想，买个彩票去吧

# encoding=utf-8import osimport yamladict = { 'a': 1, 'b': {'c: 3'}, 'result': True}with open('ly_yaml.yaml', 'w', encoding='utf-8') as f: yaml.dump(adict, f) ''' a: 1 b: 'c: 3' '''with open('ly_yaml.yaml', 'r',

https://blog.csdn.net/u014779536/article/details/108182833

# coding=utf-8import random, time, jsonimport requestsimport aiohttpimport asyncioimport redis# class RedisCliMAX_SCORE = 100 # 最大分数MIN_SCORE = 0 # 最小分数INITIAL_SCORE = 10 # 初始分数REDIS_KEY = 'proxies'# class Check_ProxyBATH_TEST_SIZE = 100

class ReadWriteExcel(): ''' 读写excel数据类 ''' def __init__(self): self.wb = Workbook() self.tables_names = [] def readexcel(self): excel_datas = [] wb = load_workbook(read_excel_name) # ws = wb.acti

1.递归def fact(n): if n == 0: return 1 else: return n*fact(n-1)aa = fact(5)print(aa)'''5 5*fact(4)=1204 4*fact(3)=243 3*fact(2)=62 2*fact(1)=21 1*fact(0)=1'''

import functoolsimport randomimport tracebackimport timedef tryTime(maxTry, timeout=random.random()): """ 重试 :param maxTry:重试次数 :param timeout:睡眠时间 :return: """ def my_decorator(func): print('func = ', func)

url 知识点：抓包工具：接口测试工具：接口相关：other：待补充

安装请自行找度娘。getpost

参考：https://blog.csdn.net/xinyuqing/article/details/105359026

前提条件：需要电脑装上安卓sdk。后续使用时需要用到adb命令环境安装可以参考：https://blog.csdn.net/test_number1/article/details/107025972本人电脑已经有安卓环境，所以没有按照这个来，亲们可以参考这个试试，或者另外自己安卓安卓环境。app配置可以参考：https://blog.csdn.net/test_number1/article/details/107086351登录案例：数据线连上手机，打开文件模式，调试模式电脑终端：a

学习

参考：https://blog.csdn.net/harryzzz/article/details/81381920

数值表示的参数含义：显示方式: 0（默认值）、1（高亮）、22（非粗体）、4（下划线）、24（非下划线）、 5（闪烁）、25（非闪烁）、7（反显）、27（非反显）前景色: 30（黑色）、31（红色）、32（绿色）、 33（黄色）、34（蓝色）、35（洋 红）、36（青色）、37（白色）背景色: 40（黑色）、41（红色）、42（绿色）、 43（黄色）、44（蓝色）、45（洋 红）、46（青色）、47（白色）常见开头格式：\033[0m 默认字体正常显示，不高亮\033[32

分享链接：https://blog.csdn.net/qq_23934063/article/details/108469868?utm_medium=distribute.pc_feed.none-task-blog-personrec_tag-15.nonecase&depth_1-utm_source=distribute.pc_feed.none-task-blog-personrec_tag-15.nonecase&request_id=5f57fd8234c6f517ae92e

https://www.cnblogs.com/QYGQH/p/9358843.html

弱网测试：属于健壮性测试内容。用户在地铁，电梯，车库等场网络不好的景使用app，我们就需要验证出现丢包、演示如案件的处理机制，增强用户体验。使用抓包工具fiddler如果出现一直加载中，需要给用户友好提示。**注入攻击：**一般指用户输入数据并点击提交后，导致整个页面或网站、服务器出现异常情况。例如：在输入框李输入: 结果：直接弹窗这种情况需要修正。**交叉测试：**软件正在执行过程中，另一个事件或操作对该过程进行干扰的测试。比如：突然来电话、手机切换到其他页面比如：上传图片操作。上传

https://blog.csdn.net/cpongo1/article/details/102580556https://www.freebuf.com/articles/system/190565.htmlhttps://blog.csdn.net/zhy025907/article/details/89512096

环境：win10 + python 3.6.5 + 小米手机操作流程：手机用数据线链接电脑，打开文件管理模式，开发者工具设置里设置成可调试打开要hook的app，让它处于运行状态电脑打开一个cmd窗口，启动手机手机上的frida服务. adb shell. cd /data/local/tmp./frida-server-12.9.7-android-arm # 启动frida服务新打开cmd窗口，进入python环境frida-ps -U # 查看app进程python test

协程在爬虫上的应用from gevent import monkeymonkey.patch_all()import geventimport requestsimport timedef get_page(url):print(‘GET: %s’ % url)time.sleep(2)response = requests.get(url)if response.status_code == 200:print(’%d bytes received from %s’ % (len(r

from operator import itemgetterfrom itertools import groupbyrows = [{'a': 10, 'age': 2}, {'a': 20, 'age': 3}, {'a': 30, 'age': 2}, {'a': 40, 'age': 4}]# rows = sorted(rows, key=itemgetter('age')) # [{'a': 10, 'age': 2}, {'a': 30, 'age': 2}, {'a': 20,

import cv2 as cvimport numpy as npprint(cv.version)def takeSecond(elem):return elem[1]##读取滑块图block = cv.imread(“picture/block.png”, -1)backimg = cv.imread(“picture/bg.jpg”)cv.imshow(“block origin”, block)##灰度化gray_backimg = cv.cvtColor(backimg, c

参考：https://blog.csdn.net/qingemengyue/article/details/80061491

def check_the_memory():ip_list = {‘47.9.3.15’: '10.8.6.3 ',}hostname = socket.gethostname() #获取计算机名称ip_adress = socket.gethostbyname(hostname)# print('ip_adress = ', ip_adress)for k, v in ip_list.items(): if ip_adress == v: ip_adress = k

adb命令将抓包工具证书从用户目录移动至系统目录,解决反爬对于本地证书认证代码和注释adb shell #连接手机进入shell模式#su root #如果你不root权限可以试着这个一般都是rootcd /data/misc/user/0/cacerts-added #移动至于用户证书目录mount -o remount,rw /system #将系统证书目录权限改成可读可写就可以移动文件不然不行cp * /etc/security/cacerts/ #这里可以使用cp也可以使用mv

EditThisCookie 是一款在 Chrome 上管理网页 cookie 的扩展，它能添加、删除、编辑、搜索、导入、导出 cookies，可以做很多你想做的事情

官网地址：https://jmeter.apache.org/下载地址：https://jmeter.apache.org/download_jmeter.cgi安装：下载完毕后，解压缩后如下点击即可打开页面打开后显示使用方法例 1post 接口 测试

环境：win7 + chrome遇见的问题：添加规则时，路径要写成 file:////C:/Users/thief/Desktop/ctrip/myjs.js，而不是 C:\Users\thief\Desktop\ctrip\myjs.js。不然可能在已经打对勾确定加载本地js文件后，刷新页面后并页面并没有展示出来内容...

文档http://airtest.netease.com/docs/cn/1_quick_start.htmlhttps://poco.readthedocs.io/zh_CN/latest/source/README.html#sdk-integration

# coding=utf-8import randomimport sys'''随机执行两个函数，这两函数可以执行不一样的功能hasattr() 函数用于判断对象是否包含对应的属性。 如果对象有该属性返回 True，否则返回 False。getattr() 函数用于返回一个对象属性值。 返回对象属性值。'''def a(x, y): # print(x + y)...

import osimport syssys.path.append(os.path.abspath(os.path.dirname(os.path.dirname(__file__))))print(os.path.dirname(__file__))print(os.path.dirname(os.path.dirname(__file__)))print(os.path.absp...

# coding=utf-8import osfrom PIL import Image, ImageSequencedef parseGIF(gifname): # 将gif解析为图片 # 读取GIF im = Image.open(gifname) # GIF图片流的迭代器 iter = ImageSequence.Iterator(im)...

环境：win10 + pycharm + nodejs环境安装请自行百度首先在D盘新建个文件夹：NodejsWebServer然后在此处打开win命令行：node -v 查看是否正确安装了nodejsnode init 初始化项目, 可以直接按 enter 键，一直到它跑完npm install express 安装express框架npm install body-p...

# coding=utf-8# coding=utf-8'''根据时间检测log日志文件日期，并自动打包压缩'''import paramiko, time, datetime, base64def days_ago(): ''' 获取当前日期前30天日期, 不算当天, 返回 list :return: ''' today = time.s...

转载：https://mp.weixin.qq.com/s/XY6yf5PgwWPSRpVTzK1uGA

# coding=utf-8import asyncio, timeimport pyppeteerfrom collections import namedtupleResponse = namedtuple("rs", "title url html cookies headers history status")async def get_html(url, timeout...

# -*- coding: utf-8 -*-from selenium import webdriverimport time, random, re, jsonfrom pynput.mouse import Button, Controller # 导入鼠标模块from pynput.keyboard import Controller as KeyController # 导入键盘...

安装Python环境下载python安装包：官网地址：python3.8.1百度网盘地址：python3.6.5建议用python3.6.5，比较稳定下载好之后，直接点击安装包即可安装Pycharm编辑器下载安装包：官网地址：pycharm安装包百度网盘地址：pycharm安装包 —> 提取码：6f9p找到pycharm安装包，直接点击安装...

安装python环境：安装python环境windown创建Python虚拟环境：windown创建Python虚拟环境selenium webdriver 启动三大浏览器Firefox,Chrome,IE：selenium webdriver 启动三大浏览器Firefox,Chrome,IE...

查看cpu：top查看磁盘 ：df -h查看某文件夹下个文件大小并从大到小排序：du -sh * | sort -nr

shell脚本定时检测python程序是否运行shell脚本#!/bin/bashecho "开始检查运费fright_run程序是否运行..."cd /opt/gh2/app/goods-freight-pyprocessID=$(ps -ef | grep freight_run.py | grep -v "grep" | awk "{print $2}")echo $pro...

c = ‘大佬但斌都"望而却不"’b = re.findall(r’"([\u4e00-\u9fa5]+)’, c)print('b = ', b)b = [‘望而却不’]

1. Genymotion下载地址：https://pan.baidu.com/s/1brjhNUiVSQwGvvrpN9HU1w提取码：84tr安装：1.执⾏genymotion-2.11.0-vbox.exe(是⼀个集合程序，包含genymotion和 virtualbox) -> 不需要 更改配置，直接下⼀步默认安装2.安装完genymotion继续等待，会提示安装v...

win7下Fiddler证书安装之后，总是无法抓取https的包；网上搜了很多方法都没解决问题，最终摸索解决方法如下：第一步：安装证书：到Fiddler的Tools-options-https下，勾选Capture HTTPS CONNECTS 勾选Decrypt HTTPS traffic勾选后，如果正常的话会直接提示安装证书；这时重启Fiddler就可以抓包了。但本人就遇...

1. fiddler：2. charles：3. mitmproxy：https://blog.csdn.net/qq_37253540/article/details/87936162遇到的坑：web可以正常抓取，手机无法抓取解决：把电脑上无线网络连接从专用设置为公用4. anyproxy：https://blog.csdn.net/dou_being/article/detail...

docker安装docker下载地址：阿里云镜像 http://mirrors.aliyun.com/docker-toolbox/windows/docker-toolbox/选择：Docker 分为 CE 和 EE 两大版本。CE 即社区版，EE 即企业版，强调安全，付费使用。下载完成后直接点击安装，每步都选择默认安装就行，安装完成后会出现双击Docker Quickstart ...

环境：win101. 安装配置nodejs首先下载好nodejs官网地址： https://nodejs.org/en/下载LTS版， .msi结尾的安装包双击此安装包，一路点击next，直至安装完成。默认会安装到 C:\Program Files
odejs 下，并且会自动添加环境变量。安装完成之后，进入cmd命令行，输入node -v 和 npm -v，会出现对应的版本号，即为...

https://loguru.readthedocs.io/en/stable/index.html

需求： 窗体中有多个控件（字体、字符样式、颜色、字号）， 每个控件有多个取值 字体：仿宋、楷体、华文彩云 字符样式：粗体、斜体、下划线 颜色：红色、绿色、蓝色 字号：20号、30号、40号如果按照正常步骤进行，需要 3*3*3*3=81 种组合，就需要写81个测试用例，显得比较多，针对这种组合量比较大的情况，如何采用最少的测试用例集合获得最大的测试覆盖率呢，就可以采用...

// https://www..cn/finosda/project/pinvestment1. 可以看到返回数据是加密的下边我们用xhr断点来调试分析，附：xhr断点介绍：XHR断点对于大多数初学者来说，可能不知道什么是xhr，但一般都听说过ajax，对的，就是指的在发送ajax(xhr)请求的时候进行阻断的断点，这个是全局断点，可以不提前指定要断哪一个xhr请求，也可以提前指定url...

1. 最简单的的调用打码平台，收费2. 还有一种利用华为云物体检测接口，可以自己上传图片去训练模型，模型训练好后，部署上线，就可以直接用了，收费，目测一次0.27元，也没细算，有提供接口服务，重要可以自己提供数据训练模型3. 获取到一张完整的图片和带缺口的图片，利用PIL模块，对比两张图的像素点，计算出距离，然后selenium滑动，免费，比如：以下代码为虎嗅 登陆代码为18年...

var e = "ABCDEFGHIJKLMNOPQRSTUVWXYZabcdefghijklmnopqrstuvwxyz0123456789+/";var get_00d8 = {rotl: function(t, e) { return t << e | t >>> 32 - e},rotr: function(t, e) { return...

反爬策略1. 最常见的 ip检测，ua检测2. cookie检测3. 需要登陆，又衍生各种出登陆验证，图片验证码，滑块等4. 参数加密：包括请求参数加密和返回数据加密。大致分为两大块：js加密及css反扒js加密需要进行js逆向解析，常见有rsa，aes， des， md5, base64 及一些自定义加密：如字符串置换css反爬包含css字体反爬（如大众点评，猫眼电...

比如电信的fiddler抓到的包，username值是四个框框，不是明文。可以在网页源码里查找：<meta http-equiv="Content-Type" content="text/html; charset=gbk">发现是gbk编码在搜索username参数（就像分析js 刚开始搜索参数一样），会找到：最后post data时：reci...

打开fiddler ---> Rooles --->Customize Rules如果提示没有下载Fiddler ScriptEditor则按提示下载后进入下一步操作安装好Fiddler ScriptEditor后，就能打开Customize Rules.js文件打开Customize Rules.js文件后，在OnBeforeRequest 函数里添加如下方法：...

安装教程：https://pan.baidu.com/s/1C-WB6XREIE0YHaZJeujf4g使用步骤：1、手机用数据线连接电脑2、选择文件夹方式连接3、手机打开usb调试并允许4、电脑命令行查看是否连接成功，>adb devices 出现List of devices attachedf431d9 device说明连接成功5、打...

# coding=utf-8import threading, time# 1、自己写代码实现def get_detail_video(vid): print('-->', vid) time.sleep(2)ths = []for i in range(10): th = threading.Thread(target=get_detail_vi...

# coding=utf-8import json, rea = '''{"bulletAttributes":["A-line silhouette with a relaxed fit.","High waisted.","Hits at the upper calf.","Model is 5'9" (176 cm), size S, wearing a regular Gap s...

ScrapydGitHub：https://github.com/scrapy/scrapydGerapyGitHub：https://github.com/Gerapy/Gerapy推荐链接：https://cuiqingcai.com/4959.html

//div[@class="main"]//span[@id="address"]//d | //e或者//div[@class="main"]//span[@id="address"]/*

原文：https://www.cnblogs.com/wanglinjie/p/9286323.htmlimport schedule 2 import time 3 4 def test(): 5 print("I'm working...") 6 def test2(): 7 print("I'm working... in job2") 8 ...

因本人写的pdf文档，懒得再这里重写一遍，就放个百度云链接把包含svg矢量图 和 字体两种方案，字体里又包含两种解析方案链接：https://pan.baidu.com/s/1BYqTzyY0qWCWxKOOrMwtog提取码：12gt有不对的地方，还请指教！！！若提示提取码过期，请留言...

# coding=utf-8import codecsfrom fontTools import unichr# 生成所有汉字信息# start,end = (0x4E00, 0x9FA5) # 汉字u编码范围 16进制的# with codecs.open("chinese.txt", "wb", encoding="utf-8") as f:# for codep...

# coding=utf-8from fontTools.ttLib import TTFontfrom PIL import Image, ImageDraw, ImageFont #绘制图片import numpy, os, platformimport pytesseract #文字识别库,这个包的安装还需要安装tesseract.exe，可以网上搜教程# coding=...

# coding=utf-8from fontTools.ttLib import TTFontworld = TTFont('898a472b.woff')# 读取响应的映射关系uni_list = world['cmap'].tables[0].ttFont.getGlyphOrder() # 'cmap' 表示汉字对应的映射 为unicode编码print(uni_list)...

普通加密方式之一：# coding=utf-8import rsaimport binascii, base64# 使用网页中获得的n和e值，将明文加密def rsa_encrypt(rsa_n, rsa_e, pwd): # 用n值和e值生成公钥 key = rsa.PublicKey(rsa_n, rsa_e) print('key = ', key) ...

# coding=utf-8import datetimefrom datetime import timedeltadef gen_dates(b_date, days): day = timedelta(days=1) # print(day) for i in range(days): # print(b_date + day*i) ...

入口地址：https://passport.yhd.com/passport/login_input.dovar navigator = {};var window = this;var JSEncryptExports = {}; (function(a6) {var dQ;var dg = 244837814094590;var dE = ((dg & 16777215)...

新建个 00.txt 文件，直接复制粘贴进去，然后运行，结果就是像个字典样式的输出，再复制粘贴到代码里，省的一行行手动添加引号，都好啥的。datas = open('00.txt', 'r', encoding='utf-8')datas = datas.readlines()print('{')for data in datas: print('"%s": "%s",' % ...

转载：静觅»[Python3网络爬虫开发实战] 7.3-Splash负载均衡配置原文地址：https://cuiqingcai.com/5654.html用Splash做页面抓取时，如果爬取的量非常大，任务非常多，用一个Splash服务来处理的话，未免压力太大了，此时可以考虑搭建一个负载均衡器来把压力分散到各个服务器上。这相当于多台机器多个服务共同参与任务的处理，可以减小单个Splas...

原文地址：https://www.jianshu.com/p/4ba20afacce21. 前言我们所说的加密方式，都是对二进制编码的格式进行加密的，对应到Python中，则是我们的Bytes。所以当我们在Python中进行加密操作的时候，要确保我们操作的是Bytes，否则就会报错。将字符串和Bytes互相转换可以使用encode()和decode()方法。如下所示：# 方法...

https://passport.kongzhong.com/

# coding=utf-8from urllib.parse import quoteimport requests, js2py, base64import execjsdef getpwd(pw): cx = ''' function setMaxDigits(n) { maxDigits = n; ZERO_ARRAY = new Array(...

原文地址：https://www.programcreek.com/python/example/83019/rsa.PublicKeydef get_pwd_rsa（self，pwd，servertime，nonce）： “”” 获取rsa2加密密码，使用https://pypi.python.org/pypi/rsa/3.1.1中的RSA模块，可以访问以...

本次涉及三个网站：分别以编号 1 2 3 表示，文中所有1 2 3 分别代表三个网站1：https://www.jidaihome.com2.http://www.qhce.gov.cn/login.jsp3：https://web.ewt360.com/register/#/login?_k=zb7fzw通过分析网站得知：1：填充方式为Pkcs7； 加密模...

地址：http://zp.job5156.com/login/com可以看见搜出来很多password。笨方法：一个个点开看看，感觉是的话，打个断点，一般能打断点的就是，打不了断点的可能就不是，这个地方不怎么清楚，还请大佬指教！！会发现此时可以多打几个断点试试这个就是加密后的结果。可以一步步调试js，会发现 string就是明文密码，keyPai...

原文地址：https://my.oschina.net/itblog/blog/1613977btoa和atob是window对象的两个函数，其中btoa是binary to ascii，用于将binary的数据用ascii码表示，即Base64的编码过程，而atob则是ascii to binary，用于将ascii码解析成binary数据，看一个例子：// Define the st...

# coding=utf-8import base64def base64_jia_mi(a): result = base64.b64encode(a.encode('utf-8')) print(str(result, 'utf-8')) return str(result, 'utf-8')def base64_jie_mi(a): result ...

# coding=utf-8def dec(a): # &#x 开头 解码 : 以 &# 或 &#x 开头的字符串叫做 NCR 字符 # 通过 py2.x下的HTMLParser 或 py3.x下的html 的 unescape() 方法来转换成能看懂的中文字符 aa = a.replace(';', '').replace('&...

# coding=utf-8'''获取当前时间上一周的开始日期和结束日期获取当前时间上一月的开始日期和结束日期'''import datetimed = datetime.datetime.now()def day_get(d): oneday = datetime.timedelta(days=1) day = d - oneday date_from...