rocky的专栏

全靠自学

python连接mongodb集群 cluster

网上资料比较少,自己测试了下。 连接方法如下: import pymongo db = pymongo.MongoClient('mongodb://10.18.6.46,10.18.6.26,10.18.6.102') 上面默认的端口do都是27017,如果是其他端口,需要这样修改: ...

2019-06-03 15:58:16

阅读数 2

评论数 0

ElasticSearch查看已经存在的文档保存在哪个分片

比如我有以下的文档: { "took" : 11, "timed_out" : false, "_shards" : { "total" : 5, "successful&qu...

2019-05-26 12:55:34

阅读数 3

评论数 0

how to use proxy in scrapy_splash

按照这个方法 http://30daydo.com/article/347 终于可行了,写中间件的方法不能用。

2018-09-02 22:22:22

阅读数 163

评论数 2

python sqlalchemy ORM 添加注释

需要更新sqlalchemy到最新版本,旧版本会不支持。   在定义ORM对象的时候, class CreditRecord(Base): __tablename__ = 'tb_PersonPunishment' id = Column(Integer, primary_k...

2018-09-02 22:11:30

阅读数 480

评论数 0

python 调用execjs 运行本地js脚本出现 JSON 未定义的错误

python 调用execjs 运行本地js脚本出现 JSON 未定义的错误 。原因是你本地的JScript引擎只有一个默认的JScript,所以会造成json未定义的错误。解决办法:安装一个nodejs的V8引擎就可以了安装换成后记得把IDE关闭重新打开,比如pycharm,不然IDE不会监测到...

2018-07-03 23:15:10

阅读数 2401

评论数 2

斐讯 天天牛绑定教程

天天牛邀请码 8vozbf 可以领取4代牛 最近斐讯推出了天天牛养成计划。 不过官方没有任何的指示教程,所以个人分享一个教程给大家。 1. 先把把旧的钱包备份一下 ,切记!! 而且一定要记得自己设的密码,官方的说法是,如果钱包文件不见了(重装系统),那么里面的币就找不到了,或者你忘记了自己设的密码...

2018-06-12 13:40:46

阅读数 301

评论数 0

天天牛邀请码8vozbf 可以领取0代牛

天天牛邀请码8vozbf 可以领取0代牛天天牛邀请码8vozbf 可以领取0代牛自从区块链宠物以太猫飙出了77万元的天价后,区块链宠物受到了大量公司的追捧,一时间百度的莱茨狗、360的区块猫、小米的加密兔纷纷出炉,似乎引发了一场游戏行业的新变革。  大量区块链宠物游戏 玩法单一  虽然伴随加密货币...

2018-06-12 12:51:20

阅读数 212

评论数 0

sklearn中SGDClassifier分类器

sklearn中SGDClassifier分类器每次得到的结果都不一样?如下代码:sgdc = SGDClassifier() sgdc.fit(X_train,y_train) sgdc_predict_y = sgdc.predict(X_test) print 'Accuary of SGD...

2018-06-07 17:21:15

阅读数 2871

评论数 1

getpass.getuser() python库

官方的文档解释的很清楚:getpass.getuser()Return the “login name” of the user.This function checks the environment variables LOGNAME, USER, LNAME and USERNAME, in...

2018-02-17 17:52:28

阅读数 694

评论数 0

NOV98 骗子平台,大家别去

虚构的交易平台,投钱进去就会被坑! 这个平台的了前身就是vexx.pro 看名字就知道山寨了。

2018-01-23 18:33:41

阅读数 435

评论数 2

爬虫模拟登录山寨币网站vexx.pro

因为每次登录vexx.pro,第一次输入正常的验证码都会说你是错误的,搞得每次都要输入2次验证码,所以为了节省点时间,就写了个模拟登录来自动获取自己的账户信息的python程序。 # -*-coding=utf-8-*- import requests session = reques...

2018-01-11 11:39:17

阅读数 948

评论数 0

outlook经常收不到邮件

用的是免费的,难道是这个原因? 巨硬的服务没几个好用的。 除了一个操作系统,没几个可以用的。 微软的基因决定的,一切看盈利,看KPI。 亏的项目砍起来毫不手软。 WP的系统,现在连微信,支付宝都停用了。 可惜了洛基亚。 原来是设计问题: 点开收件箱,显示的是重要的,隔壁有个其他的按钮...

2018-01-09 16:07:04

阅读数 8322

评论数 0

scrapy修改user-agent的几种方法

[scrapy]修改爬虫默认user agent的多种方法 很有启发的。

2017-12-14 17:43:50

阅读数 2334

评论数 0

MISCONF Redis is configured to save RDB snapshots, but is currently not able to persist on disk. Com

换了台式机,在windows下运行redis,结果出现这个错误: MISCONF Redis is configured to save RDB snapshots, but is currently not able to persist on disk. Commands that ...

2017-11-15 15:27:35

阅读数 214

评论数 0

python 连接 mongodb pymongo.Connection 不能用

因为新版的pymongodb使用pymongoMongoClinet(ip,port) 来连接mongodb数据库,所以那些旧版的教程统统的用的pymongo.Connection. DEMO import pymongo,datetime client=pymongo.MongoClient('...

2017-08-26 17:17:05

阅读数 1158

评论数 0

First character in field must be [A-Za-z$_]

这是在Robo 3T中进行mongoDB操作时,插入数据时遇到的。 在插入数据弹出框里填入一些字典,保存的时候就出错了。 First character in field must be [A-Za-z$_] 这是因为你的从其他地方复制粘贴了其他格式的编码进来,而且这些编...

2017-08-26 16:07:20

阅读数 887

评论数 1

lxml.etree._ElementUnicodeResult 转为字符

原文链接: http://30daydo.com/article/222 在爬虫过程中,使用的是lxml的xpath查找对应的字段。   address=each.xpath('.//address/text()')[0].strip()   结果用address与一般...

2017-08-14 15:58:44

阅读数 10710

评论数 0

安居客app端抓取数据包 分析数据包的签名 编写爬虫脚本

为什么要这么蛋疼,要从app入手来爬虫 ? 网页的数据不是也可以爬吗?  对于少量数据的抓取,网页爬取是完全没问题的。 至少爬一个城市的房价信息是可以的。 但是,对于要抓取百万级数据量的爬虫,安居客做了多重反爬策略,如果你没遇到,说明你的数据量不大。 安居客的反爬策略有 验证码, 封...

2017-08-13 18:17:03

阅读数 2904

评论数 5

python 多进程实例 进程间的通信

import httplib2 from multiprocessing import Lock, Process, Queue, current_process def worker(work_queue, done_queue): try: for url in it...

2017-07-17 22:39:10

阅读数 606

评论数 0

'module' object has no attribute 'fork'

廖雪峰的python中多进程的例子: import os print 'Process (%s) start...' % os.getpid() pid = os.fork() if pid==0: print 'I am child process (%s) and my...

2017-07-13 17:24:43

阅读数 7685

评论数 2

提示
确定要删除当前文章?
取消 删除
关闭
关闭