hadoop
Dream_Flying_BJ
梦想总是要有的,万一被我实现了呢!DREAM_IN_BEIJING
展开
-
hadoop源码查看
hadoop查看源码 hadoop查看源码 hadoop查看源码 hadoop查看源码 hadoop查看源码原创 2017-02-08 14:16:46 · 1002 阅读 · 0 评论 -
zookeeper的leader选举和最大故障节点数
法定数量是通过严格意义上的多数节点来表示的。在集合体中,可以包含一个节点,但它不是一个高可用和可靠的系统。如果在集合体中有两个节点,那么这两个节点都必须已经启动并让服务正常运行,因为两个节点中的一个并不是严格意义上的多数。如果在集合体中有三个节点,即使其中一个停机了,您仍然可以获得正常运行的服务(三个中的两个是严格意义上的多数)。出于这个原因,ZooKeeper 的集合体中通常包含奇数数量的节点,因原创 2017-06-13 15:55:14 · 2268 阅读 · 0 评论 -
zookeeper配置文件详解
配置参数详解(主要是ZOOKEEPERHOMEZOOKEEPER_HOME/conf/zoo.cfg文件)参数名说明clientPort客户端连接server的端口,即对外服务端口,一般设置为2181吧。dataDir存储快照文件snapshot的目录。默认情况下,事务日志也会存储在这里。建议同时配置参数dataLogDir, 事务日志的写性能直接影响zk性能。tickTimeZK中的一个时间单元。转载 2017-06-13 15:58:32 · 556 阅读 · 0 评论 -
部署kafka以及配置文件详解
########安装kafka tar -zxvf kafka_2.12-0.10.2.0.tgzcd /root/letv/kafka_2.12-0.10.2.0/config egrep -v '^#|^$' server.properties vim server.properties配置文件broker.id=2 #每一个broker在集群中的唯一标示,要求是正数。在改变IP地址,不改变b原创 2017-06-13 17:14:02 · 5773 阅读 · 0 评论 -
kafka 配置文件参数详解
kafka的配置分为 broker、producter、consumer三个不同的配置 一 BROKER 的全局配置最为核心的三个配置 broker.id、log.dir、zookeeper.connect 。 ------------------------------------------- 系统 相关 ------------------------------------------- #转载 2017-06-13 17:15:30 · 8232 阅读 · 1 评论 -
部署storm和配置文件详解
#########安装storm######## storm_install.sh sudo ansible -i ansible_hosts elk -m copy -a "src=/letv/apache-storm-1.1.0.tar.gz dest=/letv/apache-storm-1.1.0.tar.gz " ansible -i ansible_hosts elk -m script原创 2017-06-13 17:39:18 · 3483 阅读 · 0 评论 -
storm配置文件详解
storm默认参数配置storm默认配置参数在defaults.yaml里,默认参数配置请参考https://github.com/apache/storm/blob/master/conf/defaults.yaml相关参数解释Storm配置项 备 注java.library.path Storm本身依赖包的路径,存在多个时用冒号分隔storm.local.dir转载 2017-06-13 18:01:44 · 1316 阅读 · 0 评论