python学习
言缓心善
屌丝确实叼
展开
-
python爬虫极简教程(一):windows下环境安装
一、python安装官网下载地址:https://www.python.org/downloads/windows/,选择合适版本下载安装二、MongoDB安装(爬取数据存入nosql数据库)1.官网下载地址:https://www.mongodb.org/dl/win32/x86_64-2008plus-ssl?_ga=2.163307516.1357842500.153727768...原创 2018-09-20 00:33:13 · 708 阅读 · 0 评论 -
python请求https时,直接返回sslerror
1.将请求设置为不验证ssl证书:如:requests.get(url, params=data, verify=False)2.此时会日志中会出现大量warning:/Library/Python/2.7/site-packages/urllib3/connectionpool.py:847: InsecureRequestWarning: Unverified HTTPS ...原创 2019-06-26 16:28:43 · 913 阅读 · 0 评论 -
python3之线程与进程
原文链接:http://www.cnblogs.com/zhangxinqi/p/8284687.html阅读目录1、CPU运行原理 2、线程与进程的区别 3、python3调用线程 (1)线程同步 (2)queue同步队列 (3)信号量(Semaphore) (4)事件(event) (5)条件(Condition) 4、python3进程调用 (1)上下文和启动方...转载 2019-01-30 17:51:23 · 314 阅读 · 0 评论 -
Ubuntu下pip3的安装、升级、卸载
installsudo apt-get install python3-pipupdatesudo pip3 install --upgrade pipremovesudo apt-get remove python3-pip原创 2018-11-05 11:59:34 · 477 阅读 · 0 评论 -
ubuntu install python3
sudo apt-get install software-properties-commonsudo add-apt-repository ppa:jonathonf/python-3.6sudo apt-get updatesudo apt-get install python3.6installsudo apt-get install python3-pipupdate...转载 2018-11-05 11:51:46 · 208 阅读 · 0 评论 -
cenos7 yum python3.6
http://blog.51cto.com/wenguonideshou/2083301转载 2018-11-05 11:39:50 · 82 阅读 · 0 评论 -
cenos7 yum python3.6
http://blog.51cto.com/wenguonideshou/2083301转载 2018-11-05 11:34:29 · 65 阅读 · 0 评论 -
chromedriver下载
http://npm.taobao.org/mirrors/chromedriver/70.0.3538.16/unzip chromedriver_linux64.zip原创 2018-11-03 18:08:28 · 814 阅读 · 0 评论 -
python logme模块
1.安装pip install logme2.Initialization$ cd /path/to/project_root$ logme initlogme.ini 中StreamHandler表示输出到控制台,FileHandler表示输出到文件,active表示是否启用(True|False)[colors]CRITICAL = color: PU...原创 2018-11-03 16:47:06 · 313 阅读 · 0 评论 -
navigates
navigates = ['userAgent','appName','appCodeName','language','platform','innerWidth','innerHeight','orientation']for nav in navigates[:-3]: js = 'return navigator.%s'%nav print(browser.execut...原创 2018-11-01 18:11:44 · 219 阅读 · 0 评论 -
response乱码
爬取小舒代理ip(http://www.xsdaili.com/)时,页面内容显示为“89.36.212.124:1189@HTTP#[透明]法国 其他 ”,但打印出的中文效果为“[éæ]丹麦 å¶ä»”转换方法:str = '<br/>212.237.3.222:1189@HTTPS#[éæ]丹麦 å¶ä» 'print(str.encode('raw_u...原创 2018-10-10 11:29:05 · 211 阅读 · 0 评论 -
selenium常用语句
# 常用包from selenium.webdriver import ActionChainsfrom selenium.webdriver.chrome.options import Optionsfrom selenium.webdriver.common.by import Byfrom selenium.webdriver.support import expected_con...原创 2018-10-18 11:35:08 · 530 阅读 · 0 评论 -
csv编码格式,保存换行问题
之前遇到csv文件编码默认为ANSI,程序读取数据成功,后续调用其他平台API时,无法找到匹配字符,导致代码BUG,调试了好长一段时间;在用excel查看文件时,发现有跳行import csvlist = ['abc,def,gh','我是,一张,弓','中华,有神,功']with open("rent3.csv","w",encoding='utf-8', newline='') as...原创 2018-10-17 23:52:36 · 3139 阅读 · 0 评论 -
python关于docopt自己的一点理解
一、编写测试文件naval.py"""Naval Fate.Usage: naval.py --hosts=<H> [--port <P>] [--user=<U>] --password=<p> naval.py (-h | --help) naval.py --versionOptions: -h --help...原创 2019-08-14 16:56:47 · 338 阅读 · 0 评论