- 博客(7)
- 收藏
- 关注
RSS订阅原创 用python异步操作mysql（aiomysql）
aiomysql的官网文档为：https://aiomysql.readthedocs.io/en/latest/index.html什么是aiomysqlaimysql是从asyncio（PEP-3156/tulip）框架访问MySQL数据库的“驱动程序”。它依赖并重用PyMySQL的大部分部分。aiomysql试图成为一个很棒的aiopg库，并保留相同的api、外观和感觉。说人话就...
2019-12-31 16:44:35
3452
2
原创 python中将StreamReader类型转化为字节bytes（BytesIO）
在读写文件的时候，因为某些库的支持对象类型不一样，需要把得到的StreamReader对象转化成bytes这里用到from io import BytesIO常用的方法是：with aiofiles.open(file_path, 'wb') as f: await f.write(BytesIO(response.content))...
2019-12-27 16:26:35
2693
2
原创 python中，对异步并发库asyncio的深入理解（协程的方式）
asyncio是什么？asyncio 是用来编写并发代码的库，使用async/await语法。（通过协程的方式来实现，也就是实现协程的库）asyncio 被用作多个提供高性能 Python 异步框架的基础，包括网络和网站服务，数据库连接库，分布式任务队列等等。asyncio 往往是构建 IO 密集型和高层级结构化网络代码的最佳选择。asyncio的一些关键字的说明...
2019-12-27 16:18:56
548
原创 centos7下用yum安装redis(详尽教程，适合小白)
相对于其他的安装方式，yum的方式安装是最快速、最简便的。1.安装redis数据库yum install redis2.下载fedora的epel仓库yum install epel-release3.启动redis服务systemctl start redis4.查看redis状态systemctl status redis其他命令：systemctl s...
2019-12-18 15:44:48
345
原创 python爬虫时p/解post表单、获取登录cookies的一些技术总结（持续更新中）
爬虫工作的日常，无非与网站的反爬虫殊死搏斗。而通过cookies阻碍机器人请求的反爬方式，是非常有效的手段。只要隐藏得够深，要想完全p/解，并不见得是件简单的事情。嗯，程序员就是这样为难程序员。p/解了不少通过cookies反爬的网站，根据个人不成熟的经验，这里分享下我平时p/解过程中的一些心得：1、找到最后得到目标数据的url,把所有的url,headers,data 完全复制，用代码请...
2019-12-18 10:44:27
2536
3
原创 centos7安装mongodb3.4、卸载（彻底卸载）、更改root密码（最完整、最小白的教程）
本教程通过yum安装，环境为centos7。先升级下curl :yum update curl -y (否则会在安装过程中报错，升级下又不会怀孕）一、创建yum文件:vi /etc/yum.repos.d/mongodb-org-3.4.repo然后复制下面配置[mongodb-org-3.4]name=MongoDB Repositorybaseurl=http...
2019-12-17 16:40:51
2467
原创 python爬虫 携程 机票 sign transactionID
听说携程网的机票很难搞，这几天尝试了一下，最终还是搞出来了，不需要借助selenium模拟，纯代码硬干。本文目标，获取携程网的机票（国际机票为例）接口中，headers里的两个参数，sign和transactionID.一：transactionID的获取。这个参数直接在以下链接获取：https://flights.ctrip.com/international/sea...
2019-12-12 22:33:24
1785
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人