![](https://img-blog.csdnimg.cn/20201014180756922.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
笔记
不想吃辣堡
这个作者很懒,什么都没留下…
展开
-
centos7 安装配置spark集群
centos7 安装配置spark集群使用wget下载spark-3.0.0-bin-hadoop2.7压缩包(下载对应Hadoop版本的spark)[root@master ~]# wget https://archive.apache.org/dist/spark/spark-3.0.0/spark-3.0.0-bin-hadoop2.7.tgz将spark压缩包解压到/usr/locla/src[root@master ~]# tar -zxvf spark-3.0.0-bin-hadoop原创 2021-12-27 09:30:00 · 708 阅读 · 0 评论 -
centos7 Scala安装
centos7 Scala安装使用wget下载Scala压缩包[root@master ~]# wget https://downloads.lightbend.com/scala/2.12.11/scala-2.12.11.tgz解压Scala压缩包到/usr/local/src/[root@master ~]# tar -zxvf scala-2.12.11.tgz -C /usr/local/src/将解压文件夹改名为scala[root@master ~]# mv /usr/loc原创 2021-12-24 14:08:50 · 949 阅读 · 0 评论 -
mongodb安装及分布式搭建
mongodb安装及分布式搭建1、mongodb安装使用wget下载mongodb压缩包[root@master ~]# wget https://fastdl.mongodb.org/linux/mongodb-linux-x86_64-4.0.0.tgz解压到/usr/local/src/[root@master ~]# tar -zxvf mongodb-linux-x86_64-4.0.0.tgz -C /usr/local/src/重命名文件夹[root@master ~]#原创 2021-12-20 13:53:52 · 760 阅读 · 0 评论 -
七、Sqoop组件的安装与配置(数据传送工具)
七、Sqoop组件的安装与配置(数据传送工具)1、解压sqoop解压sqoop安装包[root@master ~]# tar zxvf sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz -C /usr/local/src/重命名sqoop文件夹[root@master ~]# mv /usr/local/src/sqoop-1.4.7.bin__hadoop-2.6.0/ /usr/local/src/sqoop2、配置sqoop环境创建sqoop的配置文件sq原创 2021-12-08 19:53:10 · 1525 阅读 · 0 评论 -
六、HBase组件的安装与配置
六、HBase组件的安装与配置解压HBase[root@master ~]# tar -zxvf hbase-1.2.1-bin.tar.gz -C /usr/local/src重命名HBase文件夹[root@master ~]# mv /usr/local/src/hbase-1.2.1/ /usr/local/src/hbase在所有节点中添加环境变量[root@master ~]# vim /etc/profileexport HBASE_HOME=/usr/local/sr原创 2021-10-23 23:03:16 · 299 阅读 · 0 评论 -
五、zookeeper组建的安装与配置
五、zookeeper组建的安装与配置解压zookeeper[root@master ~]# tar -zxvf zookeeper-3.4.5.tar.gz -C /usr/local/src/把zookeeper-3.4.5安装目录改为zookeeper[root@master ~]# mv /usr/local/src/zookeeper-3.4.5/ /usr/local/src/zookeeper1、master节点配置在zookeeper的安装目录下创建data和logs文件夹原创 2021-10-16 22:09:13 · 206 阅读 · 0 评论 -
四、hive组件的安装与配置
四、hive组件的安装与配置(一)、下载和解压相关文件解压hive[root@master ~]# tar -zxvf apache-hive-2.0.0-bin.tar.gz -C /usr/local/src/修改hive文件夹名字mv /usr/local/src/apache-hive-2.0.0-bin/ /usr/local/src/hive修改hive目录归属用户和用户组为hadoopchown -R hadoop:hadoop /usr/local/src/hive(原创 2021-10-15 16:56:19 · 450 阅读 · 0 评论 -
hadoop完全分布式搭建
shadoop完全分布式搭建一、前期准备 新建一台虚拟机1、基础配置配置网络(静态ip)vi /etc/sysconfig/network-scripts/ifcfg-ens33TYPE=EthernetPROXY_METHOD=noneBROWSER_ONLY=noBOOTPROTO=staticDEFROUTE=yesIPV4_FAILURE_FATAL=noIPV6INIT=yesIPV6_AUTOCONF=yesIPV6_DEFROUTE=yesIPV6_FAILUR原创 2021-10-08 15:14:08 · 195 阅读 · 0 评论