2018年12月_Ren_ger

原创 python3 使用urllib.parse对url进行处理

对于处理某些通过 url 传参的请求，可以使用 urllib.parse 来处理，当然，也可以自己写方法。下面放上一个demo：import urllib.parse scheme = "http"host = "www.urllib_parse.com"path = r"test/test_1/test_2"data = { "key" : "value", ...

2018-12-21 13:59:38 1580

原创 tempfile模块可以用于生成临时文件和目录。

导入模块import tempfiletempfile.mkstemp([suffix=”[, prefix=’tmp’[, dir=None[, text=False]]]]) 以最安全的方式创建临时文件，并且仅有创建者可读、可写该文件。文件描述符并不传递给子进程。当不再使用临时文件时，需要显示删除os.remove(output_filename)。参数：suffix指定文...

2018-12-20 11:34:36 1060

原创 python对安卓手机执行飞行模式

导入os模块import os它建议以下方式启用飞机模式：adb shell settings put global airplane_mode_on 1 不幸的是，它不起作用。它只是改变了飞行模式图标的状态，但所有无线电仍处于活动状态。它缺少一个非常重要的部分，即在设置更改后立即广播意图，以通知应用程序飞行模式状态已更改。要启用飞行模式，请使用以下命令： cmd...

2018-12-20 09:25:38 1860 3

原创 python-time模块》获取当前时间

strftime()功能：格式化输出时间字符串（str foramt time）格式：time.strftime('字符串格式'[,时间元组])返回值：格式化之后的哦字符串localtime()功能：获取当前时间元组格式1：time.localtime() 返回值：本地时间元组格式2：time.localtime(时间戳) 返回值:指定时间戳的本地时间元组...

2018-12-19 14:37:06 1381

原创 Python中》Requests Cookies操作【dict 和cookiejar互转】

dict 和cookiejar互转import requests#字典转cookiejarrequests.utils.dict_from_cookiejar(cj)#cookiejar转字典requests.utils.cookiejar_from_dict(cookie_dict, cookiejar=None, overwrite=True) ...

2018-12-19 13:51:59 3702 4

转载 logging模块学习笔记：basicConfig配置文件

#coding=utf8import sys, logging logging.basicConfig(level=logging.INFO, format='levelname:%(levelname)s filename: %(filename)s ' 'outputNumber: [%(li...

2018-12-18 18:11:44 796

原创 python 使用requests请求https输出警报InsecureRequestWarning

报错 Python Requests throwing up SSLError解决方法：verify=Falserequests.put(url,data = data, headers=headers, timeout=10, verify=False)requests.get(url,data = data, headers=headers, timeout=10, ver...

2018-12-18 17:57:43 944

原创 sys模块设置递归深度。。。。报错RecursionError: maximum recursion depth exceeded while calling a Python object

RecursionError: maximum recursion depth exceeded while calling a Python object爬虫的朋友一般分页或者回调的时候就经常会遇到这个错误，英文意思很明白，超过了Python的最大递归深度。python默认的递归深度是很有限的（默认是1000），因此当递归深度超过999的样子，就会引发这样的一个异常。解决方...

2018-12-18 16:40:47 10488 1

原创关于scrapy爬虫的注意事项

1. 图片下载的设置class ClawernameSpider(scrapy.Spider): # 定制化设置 custom_settings = { 'LOG_LEVEL': 'DEBUG', # Log等级，默认是最低级别debug 'ROBOTSTXT_OBEY': False, # default Obey robots.txt ...

2018-12-18 16:02:27 1378

原创更改pymysql默认的链接时间

解决pip安装第三方包出现socket.timeout: The read operation timed out超时问题这个问题的出现就是字面意思，链接超时。出现这个原因是两边网络连接速度慢。要解决这个问题要么提高网速----这个有的时候是服务器网速较慢，那没办法给他提高。要么就增加他的超时判定时间。使用语句：pip3 --default-timeout=100 instal...

2018-12-18 11:46:12 3780

翻译 python爬虫之requests的基本使用

简介　　Requests是用python语言基于urllib编写的，采用的是Apache2 Licensed开源协议的HTTP库，Requests它会比urllib更加方便，可以节约我们大量的工作。一、安装 pip快速安装 1 pip install requests 二、使用　　1、先上一串代码 1 2 ...

2018-12-18 10:35:55 295

Ren_ger的博客