Hadoop
文章平均质量分 57
c3tp
这个作者很懒,什么都没留下…
展开
-
master.HMaster: Failed to become active master java.net.ConnectException: Call From H520/192.168.192
问题描述:master.HMaster: Failed to become active masterjava.net.ConnectException: Call From xxx/192.168.192.134 to xxx:9000 failed on connection exception: 原因分析:hadoop的配置文件core-site.xmlHBase的配置文件hbase-site.xml这两个配置文件中该属性端口号必须保持一致!!!...原创 2021-10-30 22:29:32 · 1385 阅读 · 0 评论 -
HBase的搭建
HBase的搭建及API调用文章目录HBase的搭建及API调用一、Zookeeper的安装(伪分布式)1.解压2.修改配置文件(1).创建文件夹(2).修改配置文件(zoo.cfg)3.Zookeeper的基本命令4.测试zookeeper二、HBase的安装(伪分布式)1.解压上传2.修改配置文件(hbase-env.sh)3.HBase的基本命令4.测试HBase三、HBase的API调用总结一、Zookeeper的安装(伪分布式)1.解压 解压命令:tar -zxvf 要解压的文件原创 2021-10-28 18:28:34 · 263 阅读 · 0 评论 -
Zookeeper的安装(伪分布式)
Zookeeper的安装原创 2021-10-28 18:27:55 · 1504 阅读 · 0 评论 -
Hadoop-2.7.2伪分布式的搭建
Hadoop-2.7.2伪分布式的搭建1.解压hadoop到当前目录tar -zxvf hadoop-2.7.2.tar.gz -C ./ 解压后的目录:2.修改映射vim /etc/hosts3.为hadoop设置环境变量(默认Java环境变量已经配置)pwd 获取hadoop所在的位置编辑 /etc/profile 文件vim /etc/profile#配置Hadoop环境变量export HAOOP_HOME=/opt/Environment/hadoop-2.7.原创 2021-10-28 18:26:30 · 1032 阅读 · 0 评论 -
Hive自定义函数
MyUDF.JAR 内置类一.获取标致字符左边或者右边的内容的LeftOrRightUDF类1.源代码package chu;import org.apache.hadoop.hive.ql.exec.UDF;import org.apache.hadoop.io.Text;public class LeftOrRightUDF extends UDF{ public Text evaluate(Text text, Text sign, Text choice){原创 2021-06-30 16:34:58 · 151 阅读 · 0 评论 -
Hive自定义函数的创建与运行
Hive自定义函数的创建一. 相关依赖 基本依赖JAR包:二. 利用Eclipse构建JAR包1.创建Java Projecta.b.2.引入jar创建两个package url用来存放写的自定义函数 lib存放jar 将有关 jar copy进来导入jar3.写udf函数图中的java代码在这里插入代码片4.导出自定义的hive函数jar选择jar类型选择导出位置三. Hive上运行自定义函数...原创 2021-06-29 12:27:51 · 166 阅读 · 0 评论 -
Hive自定义函数的打包(Idea版)
Hive自定义函数的打包(Idea版)一. jar生成1.打开工程目录(右上角)2.点击Artifacts里面的加号3. 选择Add->JAR->Empty4.依次进行操作5.保存后点击Build->Build Artifacts6. 弹出我们刚刚取得jar名选择Build生成得RandomList.jar二. 自定义函数在Hive上得运行测试1.hive代码add jar /mnt/hgfs/master1/RandomList.jar;cre原创 2021-06-28 22:14:16 · 510 阅读 · 1 评论