Hadoop
奥卡姆的剃刀
GitHub: https://github.com/LeronQ
展开
-
安装Hadoop集群的准备工作(详细附图)
安装Hadoop,Spark集群步骤 在搭建Hadoop集群之前,已经在虚拟机上安装了三台Linux服务器,并且Linux的IP地址也已经配置好了,所以安装Linux服务器的过程省略了。本文主要讲述如何在此基础上,逐步搭建Hadoop环境。所有的软件以及配置信息,已经放在百度云上,可自行下载,欢迎交流! 设备信息:三台Linux服务器,SecureCRT远程连接工具,WinSCP远程文件传...原创 2019-02-23 20:59:14 · 5191 阅读 · 0 评论 -
从分布式角度解读HDFS运行机制和原理
引言:分布式的一般设计 要想深入学习HDFS就要先了解其设计思想和架构,这样才能继续深入使用HDFS或者深入研究源代码,先从一般的分布式谈起,在宏观上逐步去探究HDFSDE设计思想和架构实现。 分布式: 分布式是近几年非常火的技术概念,无论是云计算、大数据还是高并发的互联网架构话题都会频频出现这个词语,特别是这个大谈“大规模”的时代,分布式貌似成了高大上技术的代名词。引的许多刚入行的技术人员趋...原创 2019-03-03 15:22:26 · 4477 阅读 · 0 评论