![](https://img-blog.csdnimg.cn/20201014180756926.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据环境搭建
hadoop,hbase,hive,zookeeper等搭建。
白修修
这个作者很懒,什么都没留下…
展开
-
学习大数据第一步:搭建一个单机版的hadoop
学会在一个虚拟机上安装一个单机版本的hadoop,用于大数据学习。前提一个装有jdk的centos7虚拟机安装(1)解压cd /opt/hadoop --hadoop安装目录配置这三个文件etc/hadoop/hadoop-env.shexport JAVA_HOME=/opt/jdk8 --jdk安装目录etc/hadoop/core-site.xml<property> <name>fs.defaultFS&原创 2020-09-02 14:59:37 · 302 阅读 · 0 评论 -
大数据学习一定要知道的——hadoop高可用集群搭建
前提准备首先,我们要在一台纯净的CentOS7版本的linux虚拟机安装jdk,hadoop和zookeeper,配置好环境变量,这里如果不会,请看我另外两篇博客:如何在linux虚拟机中安装hadoop,并搭建hadoop集群如何在基于linux系统的hadoop集群中,安装配置hbase,hive,zookeeper安装hadoop时请记得把 hadoop-native-64-2.6.0.tar 安装到hadoop安装路径的lib和lib/native目录下。当然,这里的jdk,hadoop和原创 2020-07-11 15:31:24 · 239 阅读 · 0 评论 -
如何在linux虚拟机中安装hadoop,并搭建hadoop集群
安装前提:1、在linux虚拟机中已经安装好了jdkLinux软件安装命令,在Linux虚拟机中安装jdk2、使用MobaXterm连接Linux虚拟机如何用MobaXterm连接Linux虚拟机3、在虚拟机中新建一个software文件夹,放入以下的安装包:本篇实际上只会用到以hadoop开头的那两个安装包,但其他的安装包暂时放在那,后面都会一个一个安装的,本篇也会先简单安装。开始安装hadoop使用MobaXterm连接Linux虚拟机后,在software目录下,执行以下安装命令:原创 2020-06-27 23:33:31 · 5480 阅读 · 1 评论 -
如何在基于linux系统的hadoop集群中,安装配置hbase,hive,zookeeper
配置前提1,已经在linux虚拟机中,成功搭建了一个hadoop集群2,已经初步在opt目录下简单解压安装了hbase,hive,zookeeper以上2点如果没有完成的,请移步:如何在linux虚拟机中安装hadoop,并搭建hadoop集群3,准备好MySQL的jdbc的jar包。(版本可以不同)安装配置zookeepercd /opt/zookpr 进入zookeeper的安装目录...原创 2020-06-28 15:17:43 · 302 阅读 · 0 评论 -
在windows系统中安装配置hadoop环境变量
如果想要再windows系统中编译JAVA来操作linux虚拟机上的hdfs文件,需要在windows系统中安装配置hadoop环境变量。安装hadoop之前我已经在linux虚拟机安装了hadoop,用的hadoop安装包是:把这个安装包解压到d盘下的一个全英文路径下:D:\bigdataSource\Hadoop\hadoop-2.6.0-cdh5.14.2在刚刚安装的hadoop-2.6.0-cdh5.14.2\bin目录中加入然后再把上面的hadoop.dll复制一份放到C:\Wi原创 2020-06-30 15:54:50 · 3324 阅读 · 0 评论