- 博客(4)
- 收藏
- 关注
RSS订阅原创 Hive安装与配置
安装 —安装hive之前需要准备好hadoop环境 1.下载并解压hive的安装包 2.配置环境变量HIVE_HOME,并把$HIVE_HOME/bin添加到PATH中 3.如果需要把元数据存储在其他的数据库，则需要安装数据库 以下的配置是使用mysql作为存储元数据的数据库 环境配置 1.把Hive的conf目录中以下文件的文件名去掉.template hive-log4j.properties...
2019-10-23 22:11:55
188
原创 idea 远程提交Mapreduce的配置
IDEA安装与配置 1.安装IDEA 2.配置Maven Hadoop客户端的配置 1.安装jdk，并配置相关环境变量 2.把Hadoop集群中的hadoop文件夹复制到本地 3.配置环境变量 HADOOP_HOME HADOOP_BIN HADOOP_PREFIX 并在Path中添加Hadoop的bin目录 4.从网上下载对应版本的hadoop.dll和winutils.exe，并复制到Hado...
2019-10-22 21:03:04
269
原创 Hadoop Streaming原理及用法
—Hadoop Streaming允许用户创建和运行非Java语言的Map/Reduce 任务。 Streaming的工作原理 Streaming的常用操作
2019-10-12 23:58:03
578
原创 Hadoop分布式集群搭建
这里写自定义目录标题虚拟机准备修改IP、DNS、hostname、host文件关闭防火墙建立SSH互信安装JDK安装HadoopHadoop集群启动及检查Hadoop集群关闭 虚拟机准备 三台虚拟机（1台作为master节点，另外2台作为slave节点），虚拟机系统是centos7.5，并对虚拟机做如下的操作： 修改IP、DNS、hostname、host文件 使用 vi /etc/sysc...
2019-09-16 15:13:23
131
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人