大数据环境部署
主要是大数据应用场景中的一些组件的搭建,适合入门的新手,所以搭建过程也相对较详细
尼克不可
有事联系qq1439952134
展开
-
大数据环境部署 第七章——Hvie的部署与我室友和Mysql之间的相爱相杀
一、Mysql安装前言:(如果你已经安装好了Mysql了可以跳过此步骤)说起Mysql干我们这行的,应该无人不熟悉吧,也是开发人员的必修课,每次安装Mysql总会安装遇到千奇百怪的错误,就拿我的室友XX人来说,他每次安装总会出些问题,而我安装的时候却又没出现什么问题,其实吧还是一个操作规范的问题,你的操作规范了自然这些问题也就不会找上你,但你要是毛手毛脚的搞完手工,那等待你可能就是一座"屎"...原创 2020-03-30 16:29:01 · 525 阅读 · 3 评论 -
大数据环境部署 第六章——HA模式下的Hadoop(进阶)
前言:在章节前面的文章中我们已经讲到了hadoop的搭建过程,只不过是伪分布模式下的环境,在我们真实的生产环境上是绝对不会以这种方式来部署我们的项目的,真正的部署方式都是以高可用的模式,分布再很多的服务器上。为什么要分别部署到不同的服务器上呢,其实很大的一个原因是要保证负载均衡,也就是要雨露均沾嘛,(只玩一人迟早会坏掉,别人也要休息的时间嘛)除了负载均衡外,还要保证数据的安全,如果将数据只存放...原创 2020-03-29 23:36:23 · 352 阅读 · 0 评论 -
大数据环境部署 第五章——Spark 伪分布式搭建
大数据环境部署 第五章——Spark 伪分布式搭建前言:本文为系列教程,至此默认读者已经安装好了Hadoop,jdk;如还未配置好上述服务,可以查看笔者前面的博文进行参考配置一、准备阶段scala文件下载及配置(1) 进入scala官网复制下载链接下载官网:https://www.scala-lang.org/download/进入官网后下拉到底部选择此格式文件复制下载链接(2...原创 2020-02-09 15:43:27 · 1303 阅读 · 2 评论 -
大数据环境部署 第四章——Hbase 伪分布式搭建(使用外部zookeeper)
大数据环境部署 第四章——Hbase 伪分布式搭建(使用外部zookeeper)前言:本文为系列教程,看到这里默认读者已经配置好了hadoop,zookeeper服务如果还有未配置好的服务请查阅笔者的前几篇博客一、准备阶段1、文件下载进入apache官网进行下载Hbase文件官网下载地址:https://hbase.apache.org/downloads.html回到虚拟机内...原创 2019-11-05 21:26:50 · 1159 阅读 · 1 评论 -
大数据环境部署 第三章——Zookeeper 单机模式搭建
大数据环境部署 第三章——Zookeeper 单机模式搭建一、准备阶段1、进入官网找到下载地址,复制下载链接官网下载地址:https://zookeeper.apache.org/releases.html2、通过Xshell连接虚拟机后,进入~/opt目录后使用weget xxxxxxxxxxxxxxx/xxxx-zookeeper.tar.gz 下载链接地址的内容分命令中的...原创 2019-10-31 16:26:05 · 878 阅读 · 0 评论 -
大数据环境部署 第二章——Hadoop 伪分布式环境搭建
大数据环境部署 第二章——Hadoop 伪分布式环境搭建一、准备阶段1、Hadoop-x.x.x.tar.gz (版本随意 但是这里推荐使用2.7.x版本,毕竟现在这是稳定的版本,后面对一些其他的组件之间的依赖也更好一些)官网的下载地址 https://hadoop.apache.org/old/releases.html点击 下载二进制文件选择清华源进行下载,这样下载速度会快一些。...原创 2019-10-30 20:56:53 · 872 阅读 · 0 评论 -
大数据环境部署 第一章——Ubuntu 虚拟机安装
Ubuntu 虚拟机安装一、准备阶段(1)首先你的电脑上需要安装上VmWare(2)下载所需的Ubuntu映像文件(.iso) 官网下载地址:https://ubuntu.com/download/server ![在这里插入图片描述](https://img-blog.csdnimg.cn/20191029192455655.png?x-oss-process=image/wat...原创 2019-10-29 19:42:46 · 897 阅读 · 0 评论