Hadoop
树很懒~
这个作者很懒,什么都没留下…
展开
-
Hadoop高可用集群搭建----直接安装
Hadoop高可用集群的搭建一、搭建机器准备条件 一台centos7虚拟机 , 地址改为静态地址,以及关闭防火墙(systemctl disable firewalld)二、安装jdk配置免密登录ps: 先配置,单机时就要先配置,不要等集群的时候再配置,不然免密登录会让乱的怀疑人生ssh-keygen -t rsa -P "" cat /root/.ssh/id_rsa.pub > /root/.ssh/authorized_keys配置单机的hosts原创 2020-07-11 20:32:52 · 217 阅读 · 0 评论 -
windows本地机器配置hadoop
1. 下载hadoop压缩包并解压到相应文件夹中—相当于安装路径,后面会用到2. 将hadoopBin.rar解压,并将所有文件复制到hadoop解压文件夹下面的bin目录里解压后的hadoopBin复制后的:3. 将hadoop.dll文件复制到C:\Windows\System32 -----需要配置到系统文件中需要复制文件粘贴位置:4. 配置hadoop环境变量路径是:hadoop安装目录下的bin目录还需要新建一个hadoop_home路径,按如下截图新建一个原创 2020-07-02 19:04:07 · 3801 阅读 · 0 评论 -
HDFS文件的创建、上传、下载、删除(基于本机API调用)
HDFS文件的创建、上传、下载、删除(基于本机)一、完整的一个Hadoop环境安装参考启动hadoop程序二、新建maven工程新建参考三、文件操作ps:针对文件的操作与Linux虚拟机的操作略有不同Linux虚拟机的操作文件的创建 @Test public void create() throws Exception{ Configuration cfg = new Configuration(); //创建配置文件 FileSystem原创 2020-06-30 13:45:40 · 1061 阅读 · 0 评论 -
Hadoop环境下用java代码实现hdfs远程文件的上传和下载
Hadoop环境下用java代码实现hdfs远程文件的上传和下载文章目录Hadoop环境下用java代码实现hdfs远程文件的上传和下载一、新建maven工程二、文件的上传三、文件的下载四、生成jar包五、导入jar包并执行操作一、新建maven工程过程参考:此处需要的jar包有:<dependency> <groupId>org.apache.hadoop</groupId> <artifactId>hado原创 2020-06-30 08:46:10 · 1870 阅读 · 2 评论 -
Hive在Hadoop集群下的安装
Hive在adoop集群下的安装文章目录Hive在adoop集群下的安装一、hive安装前必备步骤二、安装Hive三、配置Hive的环境变量四、测试连接一、hive安装前必备步骤Hadoop集群能正常运行安装参考MySql安装 安装参考需要增加以下步骤:1)输入 :my -uroot -pok 启动数据库2)输入:use mysql创建用户:create user 'bigdata'@'hadoop001' IDENTIFIED BY 'ok';4)创建数据库:原创 2020-06-29 00:23:10 · 240 阅读 · 0 评论 -
Hbase在Hadoop集群中的搭建
Hbase在Hadoop组件中的搭建一.安装HBase之前的环境搭建Hadoop集群能正常运行安装参考:https://blog.csdn.net/little_sloth/article/details/106964187Zookeeper环境能正常运行安装参考:https://blog.csdn.net/little_sloth/article/details/107005083二.HBase的安装与环境的配置下载安装包将安装包拖入software文件夹中将压缩包解压到opt目录原创 2020-06-28 19:00:14 · 240 阅读 · 0 评论 -
Zookeeper在Hadoop集群下的安装
# Zookeeper在Hadoop集群下的安装目录# Zookeeper在Hadoop集群下的安装## 一、Hadoop集群的配置三、启动Zookeeper## 一、Hadoop集群的配置具体步骤参考:[https://blog.csdn.net/little_sloth/article/details/106964187]()ps:vbox环境和vmWare的安装步骤是一样的## 二、zookeeper安装及配置(集群下的虚拟机都需要)1. 将zookeeper安装包拖入sof原创 2020-06-28 17:59:43 · 388 阅读 · 0 评论 -
Hadoop和Hadoop集群的安装和配置
hadoop和hadoop集群的安装和配置文章目录hadoop和hadoop集群的安装和配置一、安装centos7.0二、hadoop安装前配置三、安装以及配置Hadoop环境四、启动Hadoop四、测试五、Hadoop集群配置一、安装centos7.0安装方式详见:https://blog.csdn.net/little_sloth/article/details/106785511二、hadoop安装前配置安装完虚拟之后,使用moba进行后续操作1 . 配置免登录:1) 生成密钥:ss原创 2020-06-26 00:41:32 · 458 阅读 · 0 评论