![](https://img-blog.csdnimg.cn/20200321223906974.jpg?x-oss-process=image/resize,m_fixed,h_224,w_224)
大数据环境搭建全家桶
博主学到的所有大数据技术的环境搭建都在此地。
BigData攻城狮
不为力所弯,不为欲所牵。
展开
-
大数据开发平台:数仓组件Apache Kylin详细安装暨使用教程
前言:Kylin依赖于Hive和Hbase,所以必须保证Hive和Hbase能够正常使用。Hbase版本推荐安装1.1版本否则可能会不兼容Hive安装教程【传送门】Hbase安装教程【传送门】简介: Apache Kylin是一个开源的分布式分析引擎,提供Hadoop之上的SQL查询接口及多维分析(OLAP)能力以支持超大规模数据,最初由eBay 开发并贡献至开源社区。它能在亚秒内查询巨大的Hive表。是国人之光,由中国人自主研发的大数据组件,2014年10月进行开源,同年11原创 2020-05-17 19:00:48 · 1586 阅读 · 1 评论 -
大数据开发平台:Spark环境搭建:看这一篇博客就够了!!
如果你看了这篇博客没有装好Spark,你来找我!!!!首先Spark是一个基于内存的用于大规模数据处理的统一分析引擎。其次它支持使用Scala、Python、R、SQL等语言快速编写应用程序,使用非常方便。最后Spark可以运行在Hadoop、Apache Mesos,Kubernetes等环境、也可以进行独立或者在云上运行,它可以访问各种资源。原创 2020-05-16 19:03:05 · 1961 阅读 · 2 评论 -
入门篇:从零到一搭建大数据开发平台(七)Hbase入门-集群式环境安装
目录依赖环境:简介:开始安装集群:更多Shell请查看下一篇博客【传送门】依赖环境:VMware15.5【传送门】Hadoop HDFS【传送门】ZooKeeper【传送门】Hbase 强依赖HDFS和ZK,必须保证HDFS集群和ZK集群是可用的Hbase 强依赖HDFS和ZK,必须保证HDFS集群和ZK集群是可用的Hbase 强依赖HDFS和Z...原创 2020-04-26 14:54:25 · 520 阅读 · 1 评论 -
入门篇:从零到一搭建大数据开发平台(一)安装VMware虚拟机(图文教程)
环境:Windows10VMware15.5pro下载路径:https://www.vmware.com/go/getworkstation-winCentOS6.9下载路径:http://isoredirect.centos.org/centos/8/isos/x86_64/CentOS-8.1.1911-x86_64-dvd1.iso安装VMware:一:以管理员方...原创 2020-02-13 15:16:26 · 4232 阅读 · 0 评论 -
入门篇:从零到一搭建大数据开发平台(二)史上最详细的安装Linux系统(图文教程 从配置主机到安装系统)
环境:Windows10VMware15.5【附安装教程】CentOS 6.9 安装包下载链接: https://pan.baidu.com/s/1YmGEr5GzkQUakvNrN9vUVQ提取码: c5ej安装CentOS一:打开Vmware选择创建新的虚拟机二:选择自定义然后下一步三:选择稍后安装操作系统,下一步四:选择操...原创 2020-02-12 20:37:07 · 2248 阅读 · 1 评论 -
入门篇:从零到一搭建大数据开发平台(三)使用SecureCRT连接工具连接服务器配置服务器,为搭建Hadoop做准备
环境:Linux CentOS6.9 点击查看下载安装教程一:使用SecureCRT连接服务器点击文件 选择快速连接输入连接服务器的ip 用户名 点击连接输入服务器登陆密码 点击确定连接成功二:配置服务器主机名 vim /etc/sysconfig/network 重启后主机名生效(重启命令 reboot)三:配置主机名与IP对应关系...原创 2020-02-20 18:00:00 · 2375 阅读 · 0 评论 -
入门篇:从零到一搭建大数据开发平台(四)搭建Hadoop HDFS完全分布式集群(学生版)
环境:宿主机:windows10虚拟机:VMware15.5系统:CentOS 6.9JDK1.8Hadoop-2.6.0-cdh5.14.0废话不多少开始安装安装步骤:一:上传压缩包并解压二:上传完毕开始解压到指定目录 servers操作命令: tar -zxvf hadoop-2.6.0-cdh5.14.0-编译后的版本.tar.gz -C ...原创 2020-02-24 11:43:26 · 844 阅读 · 0 评论 -
入门篇:从零到一搭建大数据开发平台(五)Hive安装部署教程(derby单机版不推荐 强烈推荐集群式)
环境:VMware15.5Pro【安装传送门】CentOS6.9【安装传送门】JKD1.8【安装传送门】Hadoop2.6-CDH5.15【安装传送门】一、derby单机版(了解即可不推荐学习)1、上传安装包和mysql连接包 到指定目录2、解压安装包tar -zxvf hive-1.1.0-cdh5.14.0.tar.gz -C ../serve...原创 2020-03-21 00:09:41 · 490 阅读 · 0 评论 -
入门篇:从零到一搭建大数据开发平台(六)Zookeeper分布式集群安装部署教程【含一键启动关闭脚本】
环境:VMware15.5Pro【安装传送门】CentOS6.9【安装传送门】JKD1.8【安装传送门】zookeeper-3.4.5-cdh5.14.0安装步骤:一、上传安装包cd /export/soft/rz...原创 2020-03-22 16:53:49 · 436 阅读 · 0 评论