金玉良缘

我们讨论过Nginx+tomcat组成的集群，这已经是非常灵活的集群技术，但是当我们的系统遇到更大的瓶颈，全部应用的单点服务器已经不能满足我们的需求，这时，我们要考虑另外一种，我们熟悉的内容，就是分布式，而当下流行的Dubbo框架。一，背景    以前我们需要远程调用他人的接口，我们是这么做的：                               

1.分布式系统概述注：由于大数据技术领域的各类技术框架基本上都是分布式系统，因此，理解hadoop、storm、spark等技术框架，都需要具备基本的分布式系统概念 1.1 分布式软件系统(Distributed Software Systems)² 该软件系统会划分成多个子系统或模块，各自运行在不同的机器上，子系统或模块之间通过网络通信进行协作，实现最终的整体功能² 比如分布

******HDFS基本概念篇******1. HDFS前言l 设计思想分而治之：将大文件、大批量文件，分布式存放在大量服务器上，以便于采取分而治之的方式对海量数据进行运算分析； l 在大数据系统中作用：为各类分布式运算框架（如：mapreduce，spark，tez，……）提供数据存储服务 l 重点概念：文件切块，副本存放，元数据 2. HDFS的概念和特

Solr集群的搭建以及使用(内涵zookeeper集群的搭建指南)1   什么是SolrCloud　　SolrCloud(solr 云)是Solr提供的分布式搜索方案，当你需要大规模，容错，分布式索引和检索能力时使用 SolrCloud。当一个系统的索引数据量少的时候是不需要使用SolrCloud的，当索引量很大，搜索请求并发很高，这时需要使　　用SolrCloud来满

A、式程序（只要有半数以上节点存活，zk就能正常服务）B、Zookeeper所提供的服务涵盖：主从协调、服务器节点动态上下线、统一配置管理、分布式共享锁、统一名称服务……C、虽然说可以提供各种服务，但是zookeeper在底层其实只提供了两个功能：管理(存储，读取)用户程序提交的数据；并为用户程序提供数据节点监听服务；Zookeeper集群的角色：  Leader和

1.什么是集群1.集群概念 集群是一种计算机系统， 它通过一组松散集成的计算机软件和/或硬件连接起来高度紧密地协作完成计算工作。在某种意义上，他们可以被看作是一台计算机。集群系统中的单个计算机通常称为节点，通常通过局域网连接，但也有其它的可能连接方式。集群计算机通常用来改进单个计算机的计算速度和/或可靠性。一般情况下集群计算机比单个计算机，比如工作站或超级计算机性能价格比要高得多。2.集群的特

启动zookeeper集群一键启动脚本的环境变量配置#set onekey envexport OK_HOME=/export/servers/oneKeyexport PATH=${OK_HOME}/zk:$PATHexport PATH=${OK_HOME}/storm:$PATHexport PATH=${OK_HOME}/kafka:$PATH关于黑洞一键启动的目录信息-rw-r-

原文摘自http://www.donghongchao.cn1.基础环境准备前提是安装好jdk,zookeeper这里不做描述2.安装storm下载安装包解压安装包tar -zxvf apache-storm-0.9.5.tar.gz -C /export/servers/ cd /export/servers/修改配置文件mv /export/servers/