- 博客(10)
- 收藏
- 关注
转载 storm 的子节点机器重启后 supervisor无法启动
[java] view plain copy2016-07-27 22:32:42 o.a.c.f.s.ConnectionStateManager [INFO] State change: CONNECTED 2016-07-27 22:32:42 o.a.c.f.s.ConnectionStateManager [WARN] There are no Co
2017-06-26 21:41:52 775
转载 Storm核心概念剖析
最近团队中有分析的场景,用到了JStorm来做数据的实时分析,于是花时间对于一些概念做了了解。 什么是Storm?这个的话出来应该有几年时间了,阿里巴巴也重写了一套JStorm,核心的类名都是服用的Storm的,他是一套实时数据处理系统,容错行好,然后足够稳定,目前很多数据实时分析的场景,选择Storm的越来越多了。 核心概念介绍 Nimbus:负责在集群里面发
2017-06-24 23:39:39 518
转载 storm集群部署和配置过程详解
先整体介绍一下搭建storm集群的步骤:设置zookeeper集群安装依赖到所有nimbus和worker节点下载并解压storm发布版本到所有nimbus和worker节点配置storm.yaml启动相关后台进程1 配置zookeeper集群 我们知道storm通过zookeeper来协调整个集群。zookeeper不是用来做消息传递,因此storm不会给
2017-06-24 16:08:48 418
转载 CentOS 7系统中JDK的安装与配置
操作系统版本:CentOS Linux release 7.2.1511 (Core)JDK版本:jdk-8u111-nb-8_2-linux-x64.sh安装方式:Shell脚本安装下载地址:http://www.oracle.com/technetwork/java/javase/downloads/index.html安装准备:(1)查看系
2017-06-24 11:03:31 406
转载 IK 中文分词的配置和使用
目前有很多优秀的中文分词组件。本篇只以 IKAnalyzer 分词为例,讲解如何在 solr 中及集成中文分词,使用 IKAnalyzer的原因 IK 比其他中文分词维护的勤快,和 Solr 集成也相对容易。具体就不多介绍,这里直接solr 集成 IK 的方法。 1. 首先,下载IKAnalyzer ,下载 注意:以前老的IK 不支持Solr 5.3的版本 ,
2017-06-18 20:34:05 943
转载 基于zookeeper实现分布式锁
一、分布式锁介绍 分布式锁主要用于在分布式环境中保护跨进程、跨主机、跨网络的共享资源实现互斥访问,以达到保证数据的一致性。二、架构介绍 在介绍使用Zookeeper实现分布式锁之前,首先看当前的系统架构图 解释: 左边的整个区域表示一个Zookeep
2017-06-17 16:07:37 296
转载 ZooKeeper的安装与部署
本文讲述如何安装和部署ZooKeeper。一、系统要求ZooKeeper可以运行在多种系统平台上面,表1展示了zk支持的系统平台,以及在该平台上是否支持开发环境或者生产环境。表1:ZooKeeper支持的运行平台系统开发环境生产环境Linux支持支持Solaris支持支持
2017-06-14 10:50:44 322
转载 dubbo学习及集成zookeeper集群部署
dubbo的架构节点角色说明: Provider: 暴露服务的服务提供方。 Consumer: 调用远程服务的服务消费方。 Registry: 服务注册与发现的注册中心。 Monitor: 统计服务的调用次调和调用时间的监控中心。 Container: 服务运行容
2017-06-11 21:34:42 403
转载 ZooKeeper之ZAB协议
ZooKeeper为高可用的一致性协调框架,自然的ZooKeeper也有着一致性算法的实现,ZooKeeper使用的是ZAB协议作为数据一致性的算法, ZAB(ZooKeeper Atomic Broadcast ) 全称为:原子消息广播协议;ZAB可以说是在Paxos算法基础上进行了扩展改造而来的,ZAB协议设计了支持崩溃恢复,ZooKeeper使用单一主进程Leader用于处理客户端所有事务请
2017-06-10 14:48:06 256
转载 Linux下开启关闭防火墙
Linux下启动apache server之后,由于防火墙的原因不能远程访问(本机可以),接下来介绍下Linux下如何关闭防火墙.解决方案临时关闭,即时生效,重启失效# 关闭防火墙$ service iptables stop# 开启防火墙$ service iptables start永久关闭,重启生效# 关闭防火墙$ chkconfig
2017-06-03 22:48:11 270
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人