大数据
文章平均质量分 59
IT伯伯
曾经沧海难为水,除却巫山不是云
展开
-
大数据应用
大数据应用标签(空格分隔):大数据 1. 环境搭建1. 软件准备软件版本:cloudera CDH5.3 软件包: + hadoop + sqoop + hive + zookeeper + hbase(安装备用)2. 集群搭建2. 系统架构集群物理架构 机器 主机名 HDFS MapReduce YARN(Mapreduce2.0) 192.168.61.210原创 2015-06-18 00:27:35 · 562 阅读 · 0 评论 -
Storm+Kafka实时计算框架搭建
Storm+Kafka实时计算框架搭建标签(空格分隔): storm kafaka 大数据 云计算 本篇文章是本人根据安装、配置storm实时计算框架时的执行过的命令整理出来的,中间没有配插图,不太适合初学者参考配置环境,请勿吐槽。虚拟机环境配置1. 网路配置1. 配置IPvi /etc/sysconfig/network-scripts/ifcfg-eth0 DEVICE=eth0HWAD原创 2015-09-01 22:51:36 · 3080 阅读 · 0 评论 -
Storm/kafka/flume运维命令
1. 启动zookeeper集群#h0和h1上分别执行zkServer.sh start#查看zookeeper状态zkServer.sh status2. 启动storm#h0上执行nohup storm nimbus &nohup storm ui &#h1和h2上执行nohup storm supervisor &3. 启动hdfs#h0上执行start-dfs.sh4. 启动原创 2015-09-01 21:34:14 · 729 阅读 · 0 评论 -
User root is not allowed to impersonate anonymous
使用HiveServer2 and Beeline模式运行时,通过beeline命令“beeline -u jdbc:hive2://localhost:10000 -n root” 连接server时出现 java.lang.RuntimeException: org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.security.auth原创 2017-09-27 13:56:06 · 576 阅读 · 0 评论