![](https://img-blog.csdnimg.cn/20190918140213434.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
Hadoop
文章平均质量分 90
菜鸟小白的Hadoop学习之路
llx_2000
这个作者很懒,什么都没留下…
展开
-
Hadoop集群相关配置(ssh,*-site.xml,时间同步...)
一、分发脚本与ssh免密登录 1.分发脚本 1.1scp(secure copy)安全拷贝 1.1.1scp定义 scp可以实现服务器与服务器之间的数据拷贝。(from server1 to server2) 1.1.2基本语法 scp -r $pdir/$fname $user@$host:$pdir/$fname 命令 递归 要拷贝的文件路径/名称 目的地用户@主机:目的地路径/名称 1.1.3案例实操 前提...原创 2021-08-24 17:00:54 · 363 阅读 · 0 评论 -
HDFS简单入门(特性,shell命令)
一、HDFS简介 1.HDFS(Hadoop Distributed File System)是 Apache Hadoop 项目的一个子项目,它的设计初衷是为了能够支持高吞吐和超大文件读写操作 2.HDFS是一种能够在普通硬件上运行的分布式文件系统,它是高度容错的,适应于具有大数据集的应用程序,它非常适于存储大型数据 (比如 TB 和 PB) 3.HDFS使用多台计算机存储文件, 并且提供统一的访问接口, 像是访问一个普通文件系统一样使用分布式文件系统 二、HDFS优缺点 优点: 1.存储非常原创 2021-08-24 15:06:35 · 226 阅读 · 0 评论 -
Hadoop集群搭建(安装JDK,Hadoop)
一、准备 1.准备一台模板虚拟机hadoop100,便于后面虚拟机的克隆 安装模板虚拟机,IP地址192.168.10.100、主机名称hadoop100、内存4G、硬盘50G 参考原创 2021-08-24 16:23:41 · 735 阅读 · 1 评论