Hadoop
文章平均质量分 53
段渣渣
这个作者很懒,什么都没留下…
展开
-
hdfs shell的基本使用
版权声明:未经允许,随意转载,请附上本文链接谢谢(づ ̄3 ̄)づ╭❤~ https://blog.csdn.net/xiaoduan_/article/details/79687457hdfs shell的基本使用类似于Linux的命令 统一的格式: hdfs command [genericOptions] [commandOptions] 常用命令hdfs dfs -ls &a...原创 2018-03-25 16:02:28 · 346 阅读 · 0 评论 -
HDFS架构的基本认知
版权声明:未经允许,随意转载,请附上本文链接谢谢(づ ̄3 ̄)づ╭❤~ https://blog.csdn.net/xiaoduan_/article/details/79687600HDFS架构的基本认知1 Master(NameNode/NN) 带 N个Slaves(DataNode/DN) HDFS/YARN/HBase也都是采用这种方式1个文件会被拆分成多个Block ...原创 2018-03-25 16:07:04 · 160 阅读 · 0 评论 -
Hadoop伪分布式安装步骤
Hadoop伪分布式安装步骤版权声明:未经允许,随意转载,请附上本文链接谢谢(づ ̄3 ̄)づ╭❤~ https://blog.csdn.net/xiaoduan_/article/details/79687666 1. JDK安装 解压:# tar -zxvf jdk-7u79-linux-x64.tar.gz -C ~/app 添加到系统环境变量: # vim ...原创 2018-03-25 16:08:29 · 150 阅读 · 0 评论 -
Java API操作HDFS文件
版权声明:未经允许,随意转载,请附上本文链接谢谢(づ ̄3 ̄)づ╭❤~ https://blog.csdn.net/xiaoduan_/article/details/79687700Java API操作HDFS文件package coom.anthony.hadoop.hdfs;import org.apache.hadoop.fs.*;import org.apache.h...原创 2018-03-25 16:10:02 · 378 阅读 · 0 评论 -
Hadoop中的jobhistory配置与启动停止
版权声明:未经允许,随意转载,请附上本文链接谢谢(づ ̄3 ̄)づ╭❤~ https://blog.csdn.net/xiaoduan_/article/details/79689882Hadoop中的jobhistory配置与启动停止jobhistory配置在yarn-site.xml中添加<!-- 开启日志聚合 --><property>...原创 2018-03-25 19:57:11 · 15235 阅读 · 2 评论