python
王墨语
这个作者很懒,什么都没留下…
展开
-
python爬取vnd.openxmlformats-officedocument.spreadsheetml.sheet类型数据
python处理xlsx类型数据原创 2023-03-02 11:18:25 · 615 阅读 · 0 评论 -
python爬虫如何使用代理ip
目录python requests和selenium使用代理iprequests使用代理ipselenium使用代理ipselenium工具被浏览器检测出来python requests和selenium使用代理ip很多时候,我们的爬虫ip被封,这个时候就需要用到代理ip了。requests使用代理ip这里假设代理的用户和密码,ip和端口分别为:proxyUser = 4858555769507840proxyPass = X7nEeMiproxyHost = “122.239.176.108原创 2021-02-25 15:23:32 · 1554 阅读 · 0 评论 -
mongo 通过eval 认证mongo权限执行创建索引的命令
之前遇见一个需求,要把类似如下图的创建索引语句通过python实现这里python的pymongo跟这里的操作语句差别很大,所以通过python操作shell命令来实现,问题就是如何验证mongo的用户名和密码mongo-uname-p password--authenticationDatabase"admin" dbname --eval"mongo shell"上...原创 2019-11-01 10:57:35 · 952 阅读 · 0 评论 -
python如何获取uwsgi的各个worker的status
一般来讲,我们获取每个uwsgi的状态,可以通过uwsgitop命令,得到实时的一个状态,如下图:但是该命令跟top命令不一样,top命令可以通过top -n 1 类似命令得到一个静态的输出,python通过os.open或者subprocess等可以获得输出,但是uwsgitop并没有封装该参数。不过我们想通过python来获取每个worker的status状态,可以通过uw...原创 2019-10-11 14:19:26 · 2207 阅读 · 3 评论 -
python实现mongo只迁移表结构和索引
在某些业务场景,我们或许只迁移部分表的数据,大部分都是迁移表结构和索引,这种如何实现,如下:#coding=utf-8import subprocessimport pymongopath_indexs = '/home/indexs/'path_table_structure = '/home/table_structure/'mongo_client = pymongo.Mo...原创 2019-10-11 14:55:35 · 499 阅读 · 0 评论 -
阿里云服务器如何手动实现mysql双机热备
阿里云服务器由于不支持keepalive虚拟ip,导致无法通过keepalive来实现mysql的双机热备。我们这里要实现阿里云的双机热备有两种方式:1,购买阿里云的云数据库高级版,自带从库,主库故障自动切换到从库2这里主要是讲第二种方式,两台阿里云服务器,分别部署mysql,实现mysql的主主同步。这里就不着重讲mysql的主主同步了,大家可以自行百度,有需要的,以后可能会出一篇文章。...原创 2019-10-11 15:24:15 · 723 阅读 · 0 评论