- 博客(4)
- 收藏
- 关注
RSS订阅原创 SSD、HDD、SSHD是什么硬盘
SSD硬盘：固态硬盘HDD硬盘：机械硬盘SSHD：HDD和SSD结合体，SSHD硬盘的主体是机械硬盘，盘体上自带闪存模块，一般容量比较小，闪存模块负责数据的运算处理和数据的传输，性能比HDD有很大提升...
2022-02-16 16:56:57
2461
原创 Hadoop序列化
MapReduceInputFormat：把数据变成kv值KeyValueTextInputFormatNLineInputFormatCombineTextInputFormatOutputFormatShuffle：整理归纳分组
2021-12-12 22:40:53
917
原创 Hadoop安装包和配置文件
Hadoop目录结构重要目录解释1）bin目录：存放对Hadoop相关服务（HDFS,YARN）进行操作的脚本2）etc目录：Hadoop的配置文件目录，存放Hadoop的配置文件3）lib目录：存放Hadoop的本地库（对数据进行压缩解压缩功能）4）sbin目录：存放启动或停止Hadoop相关服务的脚本5）share目录：存放Hadoop的依赖jar包、文档、和官方案例配置文件配置文件路径：$HADOOP_HOME/etc/hadoop核心配置文件core-site..
2021-12-12 00:18:35
863
原创 1.Hadoop简介
Hadoop是Apache基金会开发的分布式系统基础架构；主要解决海量数据的存储和数据的分析计算问题；Hadoop通常泛指Hadoop生态圈。Hadoop的优势1）高可靠性：Hadoop底层有多个副本，某个存储出现故障也不会导致数据丢失；2）高扩展性：方便扩展节点，提升性能；3）高效性：常规下难以处理的海量数据，在MapReduce的方式下可以在短时间内处理；4）高容错性：运行失败的任务自动重新分配。Hadoop的组成Hadoop1.xHDFS（数据存储）；MapRe
2021-12-11 18:31:20
1432
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人