- 博客(9)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 大数据量、海量数据处理方法总结
大数据量的问题是很多面试笔试中经常出现的问题，比如baidu google 腾讯这样的一些涉及到海量数据的公司经常会问到。下面的方法是我对海量数据的处理方法进行了一个一般性的总结，当然这些方法可能并不能完全覆盖所有的问题，但是这样的一些方法也基本可以处理绝大多数遇到的问题。下面的一些问题基本直接来源于公司的面试笔试题目，方法不一定最优，如果你有更好的处理方法，欢迎与我讨论。1.Bloom ...
2014-05-28 23:03:39
137
原创 Google的神器
1 Chubby http://blog.csdn.net/historyasamirror/article/details/38701682 BigTable http://thecloud.iteye.com/blog/1918999 http://blog.csdn.net/opennaive/article/details/75325893 GFS...
2014-05-28 21:31:39
105
原创 LSM树--高效的存储
转http://bofang.iteye.com/blog/1676698 论文 The Log-Structure Merge-Tree(LSM-tree)(http://www.google.com.my/url?sa=t&rct=j&q=&esrc=s&source=web&cd=4&cad=rja&ved=0CDoQFjAD...
2014-05-10 09:11:36
185
原创 （转）一致性哈希算法
转帖：http://mntms.iteye.com/blog/2063904 一致性哈希算法是分布式系统中常用的算法。比如，一个分布式的存储系统，要将数据存储到具体的节点上，如果采用普通的hash方法，将数据映射到具体的节点上，如key%N，key是数据的key，N是机器节点数，如果有一个机器加入或退出这个集群，则所有的数据映射都无效了，如果是持久化存储则要做数据迁移，如果是分布式缓存，...
2014-05-08 21:58:49
86
原创 Jedis使用
目录 1 JEDIS简介 1 2 JEDIS简单使用 1 3 JEDIS的池使用 2 4 JEDIS的分布式 4 1 Jedis简介 Jedis是Redis的java客户端。我们可以在java编程中使用它来编写java代码访问Redis服务。 关于Redis简绍：http://xmong.iteye.com/blog/1840242 要使用Jedis可以通过...
2014-05-08 21:33:46
101
原创 redis对关系数据库的优势
丰富的数据结构使得redis的设计非常的有趣。不像关系型数据库那样，DEV和DBA需要深度沟通，review每行sql语句，也不像memcached那样，不需要DBA的参与。redis的DBA需要熟悉数据结构，并能了解使用场景。下面举一些常见适合kv数据库的例子来谈谈键值的设计，并与关系型数据库做一个对比，发现关系型的不足之处。用户登录系统记录用户登录信息的一个系统， 我们简化业务...
2014-05-08 21:15:36
160
原创 (转)走近NoSQL数据库的四大家族
NoSQL顾名思义就是Not-Only SQL，它可以作为关系型数据库的良好补充。在TechTarget数据库之前的报道中，我们也对NoSQL数据库的应用场景做了详细的介绍。NoSQL 不像传统的关系型数据库，其种类繁多，且各有各的优势和缺点，对于DBA来说如何区分彼此的不同是一件比较头痛的工作。在本文中，我们就将进一步为您接受关于NoSQL数据库的分类以及各自的优缺点。 NoSQL数据库...
2014-05-08 21:08:35
96
原创 mysql 5.6.14 win7 32位免安装版配置 (转载)
1.下载mysql 5.6.14；下载地址:http://cdn.mysql.com/Downloads/MySQL-5.6/mysql-5.6.14-win32.zip 2.解压到自定义目录，我的是D:\ProgramFiles\mysql5614win32\bin 3.复制根目录下的my-default.ini,改名为my.ini,my.ini用下面内...
2014-05-03 13:00:14
171
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人