- 博客(4)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 基于Redis的布隆过滤器的实现
项目简介包含一个基于Redis的布隆过滤器的实现，以及应用到Scrapy中的Demo。地址：BloomFilterRedis布隆过滤器网上有很多介绍，推荐《数学之美》，介绍的很详尽，此处不再赘述。哈希函数布隆过滤器中需要n个哈希函数，我使用的是Arash Partow提供的常见哈希函数。建立在Redis上的布隆过滤器Redis中有一个数据结构叫做Bitmap(下方有官网详解)，它提供一个最大长度为5
2017-04-30 17:57:51
30415
1
转载 Scrapy+PhantomJS+Selenium动态爬虫
转自http://jiayi.space/post/scrapy-phantomjs-seleniumdong-tai-pa-chong#fb_new_comment很多网页具有动态加载的功能，简单的静态页面爬虫对它就无能为力了。这时候就需要PhantomJS+Selenium两大神器，再加上Scrapy爬虫框架，就可以拼凑成一个动态爬虫。PhantomJS简单点说PhantomJS就是一个没有界
2017-04-27 16:43:56
22619
6
原创 Python读写/追加excel文件Demo
三个工具包python操作excel的三个工具包如下，注意，只能操作.xls，不能操作.xlsx。xlrd: 对excel进行读相关操作xlwt: 对excel进行写相关操作xlutils: 对excel读写操作的整合这三个工具包都可以直接使用pip进行下载：sudo pip install xlrdsudo pip install xlwtsudo pip install xlutil
2017-04-02 17:40:28
24831
原创 Python的str强转int时的小问题
数字字符串前后有空格没事：>>> print(int(" 3 "))3但是下面这种带小数点的情况是不可取的：>>> print(int("3.0"))Traceback (most recent call last): File "<stdin>", line 1, in <module>ValueError: invalid literal for int() with base 10
2017-04-01 22:43:24
12382
2
基于Redis的布隆过滤器
2017-04-30
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人