hadoop
文章平均质量分 57
永远相信神话
我只相信我自己
展开
-
JDK1.8在LINUX下安装步骤
在/usr/lib/目录下新建jvm文件夹,如果已有jvm文件夹,则将之前的JDK版本删除,即在jvm目录下执行命令:rm –rf *将JDK文件jdk-8u40-linux-x64.gz拷贝到/home/目录下;在/home/目录下执行命令(也就是把压缩包tar开到 /usr/lib/jvm 下面): tar zxvf ./jdk-8u40-linux-x64.gz -...原创 2018-06-06 13:55:17 · 565 阅读 · 0 评论 -
HDFS的基本操作
HDFS的基本操作 命令行客户端的常用命令 1、上传文件到集群中hdfs dfs -put 本地路径 hdfs上的路径例如:把本地 linux 上root目录下的a.txt上传到集群中的根目录下 hadoop fs -put /root/a.txt /相同功能的另外一种写法hadoop fs -copyFromLocal /root/a.txt...原创 2018-06-13 13:26:58 · 530 阅读 · 0 评论 -
IDEA新建maven项目
1、新建项目 选择org.apache.maven的快速启动 2、选择下一步原创 2018-06-19 16:43:36 · 216 阅读 · 0 评论 -
从HDFS文件系统中读写文件原理
1、从HDFS文件系统中写文件 1、客户端发起请求要写文件 /aa/jdk.tgz 2、namenode会检查该目录是否存在,返回是否可写 3、客户端请求写入第一个block 4、namenode返回3个datanode主机 5、挑选dn1,请求建立传输数据的连接,建立socket连接,请求带有参数,告诉dn1要传输给多少台机器 ...原创 2018-09-14 10:35:39 · 2209 阅读 · 0 评论