hadoop
冰清雪酷
知识改变命运,科技改变未来
展开
-
hadoop学习第一天~环境搭建以及初步使用
hadoop学习第一天~环境搭建以及初步使用下载hadoop包下载页面wget https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/hadoop-3.0.0/单机环境搭建Required SoftwareRequired software for Linux include:Java™ must be installed. Reco原创 2017-12-19 19:47:52 · 326 阅读 · 0 评论 -
hadoop学习第二天~Hadoop2.6.5完全分布式集群搭建和测试
文章参考:http://blog.csdn.net/xiaoxiangzi222/article/details/52757168环境配置: 系统 centos7 节点 192.168.1.111 namenode 192.168.1.115 datanode2 192.168.1.116 datanode3java 环境 : jdk-...原创 2017-12-28 02:27:10 · 1448 阅读 · 0 评论 -
关系型数据库表导入hive
为了把关系型数据库表导入hive,写了一个工具类。 具体思路: 1、读取关系型数据库表信息。 2、根据表信息创建hive表 3、读取表数据 4、写入文件 5、上传文件到hive,服务器,本地加载到hive中。 使用方法:1、在配置文件hiveConfiguration.properties 配置好相关信息,如下:hive.driverName=org.apache.hive.jdbc.原创 2018-04-25 14:12:21 · 1065 阅读 · 1 评论