- 博客(5)
- 问答 (1)
- 收藏
- 关注
RSS订阅
原创 Hadoop学习笔记（一） 搭建一个Hadoop集群
在学习的Hadoop的的过程中，首先要做的就是建立一个Hadoop的的的集群。我在搭建的过程中，除了许多问题，然后不断的查找不断的百度，通过大量的实验。不知道废了多少组虚拟机终于成功了，下面就把我搭建的过程分享出来吧。 1.下载的VMware，安装虚拟机 我下载的是VMware12Pro，现在好像最新的是VMware14，你们也可以下载使用。下面直接给你们一条链接吧。 下咱完成后点击安...
2018-08-23 22:07:57
223
原创 Hbase JavaAPI的简单封装
在学习使用Hbase的时候，因为Hbase中存放的是byte数组。所以大部分的输入类型都是byte数组格式的。这样方便了存储其它大型文件，但是对于初学者的我们来讲就是十分不友好的。因此，我在这里对一些东西做了简单的二次封装，提高了学习的效率。这样，我们可以有更多的时间去考虑如何利用Hbase来设计业务逻辑，降低学习的难度。同时，这里做的一些封装，也可以为以后开发的时候封装工具做一个前瞻性的探索。 ...
2018-08-09 20:55:34
1008
原创 Centos 6.5安装MySQl
在Linux上和在Windiws上面不一样。因为Windows下面安装MySQL的时候有安装版的MySQL，并且Windows还有可以操作的可视化界面。而在Linux下面只有解压版的MySQL，并且由于Linux没有可视化界面，所以不管做什么都不够只管只能通过一条条的指令去完成。因此我写这篇博客是为了能够为刚刚开始学习Linux的同学提供一个极大的方便。也算是把我当时踩过的坑全部给各...
2018-08-05 18:18:47
150
原创 HDFS2.x中Fimage文件和Edit.log文件的作用
在HDFS中，每一个文件块。都会有一条元数据用来唯一标识这个文件块的存在。而Fimage和edit.log这两个文件就是用来保存，处理这些元数据信息的文件。 Fimage和edit.log文件 元数据的特点：频繁操作，量大 因为元数据需要频繁操作这个特点，所以要将元数据（MetaData）存放到内存中，以便于高速访问。但是由于内存（RAM随机存储器）的断电数据丢失的特性，因此在硬盘中需要有一...
2018-08-05 17:38:18
1544
原创 HDFS2.X流程
进程组成 ResourceManager：yarn的主管角色（管理协调分配集群中的资源） NodeManager：yarn中的劳动者 用来启动和监视本地计算机资源单位Container的利用情况。 NameNode: 元数据的处理者。 用来处理DataNode对它的各种请求。列如心跳活动，以及周期性注册等活动。 SecondaryNameNode：元数据文件的合...
2018-08-05 17:25:50
295
空空如也
C#关于MDI的问题，菜鸟一个还望各位大佬。。。
2017-06-13
TA创建的收藏夹 TA关注的收藏夹
TA关注的人