- 博客(6)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 Java小爬虫Demo
/** * Created by Cage on 2016/10/27. */ import java.io.File; import java.io.FileOutputStream; import java.io.IOException; import java.io.InputStream; import java.io.OutputStream; import java.net.URL;
2016-10-27 22:41:06
638
原创 关于zookeeper的一二三·再续
前面的两篇已经对ZK有了一些介绍（传送门：关于zookeeper的一二三，关于zookeeper的一二三·续），今天继续来探讨一个典型的应用场景：分布式共享锁。1、需求 在我们自己的分布式业务系统中，可能会存在某种资源，需要被整个系统的各台服务器共享访问，但是只允许一台服务器同时访问，此时，我们需要设计一个分布式共享锁。 设计思路： package zklock;import org.apac
2016-10-17 19:13:51
391
原创 关于zookeeper的一二三·续
上一篇中提过zk可以用来做服务器上下线动态感知，今天就来写这个东西，当然，肯定距离生产环境下的代码质量相差深甚远，不断前行努力吧~~1、需求简单描述 在某个分布式系统中，主节点可以有多台，可以动态上下线，任意一台客户端都能实时感知到主节点服务器的上下线。设计思路： 对于服务器异常宕机的处理类似，省去不表。2、代码开发 服务端程序package zk_dist;import
2016-10-17 18:39:40
430
原创 关于zookeeper的一二三
1、概念（非典型介绍） zookeeper是一个分布式协调程序，为其他的分布式程序提供服务，当然，zookeeper本身就是一个分布式程序，满足只要半数以上节点存活(因此最好配成奇数个节点），zookeeper就能正常工作，主要用来做主从协调、服务器节点动态上下线感知、统一配置管理、分布式锁、统一名称服务等等。虽说zk(以下均用zookeeper的简称zk),但是zk在底层其实只是提供了两个功能：
2016-10-17 09:52:18
685
原创 02-Storm之Hello World：单词统计
1、说明设计一个topology，来实现对一个句子里面的单词出现的频率进行统计。整个topology分为三个部分： RandomSentenceSpout：数据源，在已知的英文句子中，随机发送一条句子出去。 SplitSentenceBolt:负责将单行文本记录（句子）切分成单词 WordCountBolt:负责对单词的频率进行累加2、TopologyMain 驱动类package wordc
2016-10-14 14:59:37
2840
原创 01-Storm初探
1、Storm是什么？ 此处省略一万字~~2、Storm架构图 nimbus:负责资源分配和任务调度 supervisor:负责接受nnimbus分配的任务，启动和停止属于自己管理的worker进程 worker:运行具体处理逐渐逻辑的进程 task：worker进程中每一个spout/bolt的线程称为一个task，在storm 0.8之后，task不再与物理线程对应，同一个s
2016-10-14 12:35:16
455
hadoop2.7.2windows工具winutils.exe和hadoop.dll hadoop.exp libwinutils.lib等
2018-03-15
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人