hadoop
hadoop学习笔记
布伽思索
gitee地址:https://gitee.com/bujiasisuo
展开
-
HDFS文件系统(含hdfs常用命令,java对hdfs API的简单操作)
HDFS文件系统HDFS概念什么是HDFSHDFS的组成HDFS文件块大小HFDS命令行操作基本语法常用命令Java操作hdfs配置编译环境获取文件系统上传文件文件下载目录创建删除文件文件重命名 前置条件:hadoop环境搭建完毕。 hadoop环境搭建 HDFS概念 什么是HDFS HDFS,它是一个文件系统,用于存储文件,通过目录树来定位文件;其次,它是分布式的,由很多服务器联合起来实现其功能,集群中的服务器有各自的角色。 HDFS的设计适合一次写入,多次读出的场景,且不支持文件的修改。适合用来做数据原创 2020-09-18 15:54:34 · 251 阅读 · 1 评论 -
hadoop伪分布式的搭建案例
hadoop伪分布式的搭建环境准备centos环境准备配置静态ipssh免密登录关闭防火墙java环境准备hadoop环境准备hadoop伪分布式配置修改配置文件core-site.xmlhdfs-site.xmlyarn-site.xmlmaped-site.xml启动及初始化测试案例可能会存在的问题第二次hadoop启动不成功 环境准备 linux版本:centos7.2 64 centos环境准备 配置静态ip ##通过修改配置文件设置静态ip vim /etc/sysconfig/network-原创 2020-09-16 16:05:31 · 328 阅读 · 0 评论