- 博客(5)
- 收藏
- 关注
RSS订阅原创 HADOOP java客户端的使用
一、一般操作package hdfs; import java.io.FileNotFoundException; import java.io.IOException; import java.net.URI; import java.util.Iterator; import java.util.Map.Entry; import org.apache.hadoop.conf.Config...
2018-03-24 11:04:13
705
原创 HDFS命令学习（一）：常用命令
-help 功能：输出这个命令参数手册-ls 功能：显示目录信息示例： hadoop fs -ls hdfs://vm1:9000/备注：这些参数中，所有的hdfs路径都可以简写-->hadoop fs -ls / 等同于上一条命令的效果-mkdir 功能：在hdfs上创建目录示例：hadoop fs ...
2018-03-24 10:25:54
285
原创 hadoop集群搭建
一、hadoop核心组件： HDFS（分布式文件系统） YARN（运算资源调度系统） MAPREDUCE（分布式运算编程框架）二、下载解压 下载地址：http://mirrors.shu.edu.cn/apache/hadoop/common/ 解压 [hadoop@vm2 ~]$ tar -zxvf hadoop-2.6.4.tar.gz 三、环境变量 ...
2018-03-23 12:29:07
131
原创 zookeeper的简单使用
zookeeper的数据结构为树形目录结构每个节点称为znodeznode有两种类型：临时（ephemeral）断开连接自动删除 没有子节点 持久（persistent）断开连接不会删除Znode有四种形式的目录节点（默认是persistent ）PERSISTENTPERSISTENT_SEQUENTIAL（持久序列 从0开始）EPHEMERALEPHEMERAL_SEQUENTIAL一、命令行...
2018-03-22 22:23:57
165
原创 zookeeper安装
一、简介Zookeeper是一个分布式协调服务；Zookeeper本身就是一个分布式程序（节点数为基数，只要有半数以上节点存活就可以提供服务）zookeeper提供了两个功能： 1.数据管理； 2.节点监听；Zookeeper集群的角色： Leader 和 follower 二、安装 1 下载 下载地址 https://mirrors.tuna.tsinghua...
2018-03-22 18:22:44
107
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人