大数据处理技术
风中情
这个作者很懒,什么都没留下…
展开
-
Erlang在linux上的安装
第一次在linux安装Erlang,花了很多时间去安装,老是缺少一些依赖文件,搞得很郁闷,后来在网上找到了“Kerl”,这东西很牛,很容易就能安装Erlang,也不用去管有什么依赖文件,只要能够联网就ok。下面简单介绍下使用方法。 1、下载Kerl https://github.com/spawngrid/kerl 2、随便找个路径下,原创 2013-06-19 23:05:22 · 9980 阅读 · 2 评论 -
Rabbitmq集群测试1
假设有3个rabbitmq A,B,C组成集群(普通集群)(一)测试一1、在A中添加一个queue--mq.test12、连接B向mq.test1发送持久化数据3、关闭A现象1:当关闭A,发送程序能够继续发送数据,不会报错原因:虽然A已经关闭了,但是B没有关闭,connection依旧存在。4、关闭发送程序5、重启启动发送程序现象2:发送程序启动失败报错原因原创 2013-07-02 17:40:25 · 1657 阅读 · 0 评论 -
FastDFS使用情况总结2
FastDFS_v3.11版本当使用文件服务器合并小文件功能,需要注意的地方1、定时生成一个固定大小的trunk文件(用于存放小文件)2、当删除存放在trunk文件中的小文件的时候,trunk不会被删除,而且trunk文件大小是不变的,只是在trunk文件中存放更多的小文件。trunk文件就像一个大小固定、用来存放小文件的容器,当一个文件被删除,就相当于从容器中拿出了这个文件,容器中文原创 2014-02-25 19:14:23 · 996 阅读 · 0 评论 -
FastDFS使用情况总结1
FastDFS_v3.11版本 fastdfs-nginx-module_v1.10版本 nginx-1.0.11版本 pcre-8.34tracker 10.0.2.15storage1 10.0.2.15(s1)storage2 10.0.2.16 (s2)nginx+fastdfs插件(n1,n2)一、安装过程遇到的问题1、如果group name设置成一样的话,原创 2014-02-17 14:47:38 · 1601 阅读 · 0 评论 -
Paxos算法学习总结1
一、Paxos 算法解决的问题是一个分布式系统如何就某个值(决议)达成一致。一个典型的场景是,在一个分布式数据库系统中,如果各节点的初始状态一致,每个节点都执行相同的操作序列,那么他们最后能得到一个一致的状态。为保证每个节点执行相同的命令序列,需要在每一条指令上执行一个「一致性算法」以保证每个节点看到的指令一致。一个通用的一致性算法可以应用在许多场景中,是分布式计算中的重要问题。因此从20世纪80原创 2014-03-20 18:06:33 · 885 阅读 · 0 评论 -
FastDFS_v5.05安装记录
1、软件包 FastDFS_v5.05.tar.gz libfastcommon-master.zip fastdfs-nginx-module_v1.16.tar.gz zlib-1.2.8.tar.gz pcre-8.12.tar.gz nginx-1.7.9.tar.gz2.安装部署 FastDFS_v5.05依赖原创 2015-01-12 19:40:09 · 11357 阅读 · 2 评论