分布式计算原理笔记
qnvhuang
这个作者很懒,什么都没留下…
展开
-
1-Hadoop之伪分布搭建
实验环境:虚拟机CentOS 7 + Hadoop2.7.3 +SecureCRT1,安装完系统后,使用SecureCRT连接虚拟机,在 / 目录下新建目录mkdir /tools ---->用于存放软件包mkdir /training ---->用于安装软件2,安装java-JDK在使用SecureCRT上传下载之前需要给服务器安装lrzsz:yum -...原创 2019-03-15 14:22:25 · 216 阅读 · 1 评论 -
2-Hadoop的HDFS详解(一)
Hadoop之HDFS<一>:脑图:目录:HDFS的由来和相关概念HDFS的体系结构,HDFS的存储原理HDFS的数据读写过程HDFS编程实践HDFS简介:全称:Hadoo Distributed File System目的:为了解决海量数据的分布式存储问题。分布式文件系统的起源:随着海量数据的产生,单机无法存储这么多数据,需要借助计算机集群来处理海量的数据。...原创 2019-04-10 09:43:38 · 1311 阅读 · 0 评论 -
Spark伪分布安装
Spark standalone 伪分布安装安装条件:虚拟机CentOS7 系统预先伪分布装完整了Hadoop及JDK安装spark-2.1.0-bin-hadoop2.7.tgz安装步骤:- 1、下载安装包进入Spark选择如下选项,点击红框处选择HTTP,第二个清华的镜像- 2、解压配置Spark将压缩包上传至 /tools目录,解压到/training...原创 2019-08-27 22:29:26 · 510 阅读 · 0 评论 -
HBase standalone 伪分布安装
安装HBase standalone 伪分布安装条件:虚拟机CentOS7 系统预先伪分布装完整了Hadoop及JDK安装 hbase-1.3.1-bin.tar.gz安装步骤:- 1、下载安装包进入HBASE官网选择如下选项,点击红框处选择HTTP,第二个清华的镜像- 2、解压配置HBASE- 2.1、先将Hadoop伪分布启动- 2.2、 将压缩包上传至...原创 2019-08-27 22:33:56 · 150 阅读 · 1 评论