大数据
swimhigh
这个作者很懒,什么都没留下…
展开
-
SPARK 集群运行是读取配置文件的常见问题
SPARK 集群运行是读取配置文件的问题 在实时计算时,遇到一个异常:Caused by: java.lang.NullPointerException at com.szkingdom.kdap.api.compute.dao.DBDaoFactory.batchUpdate(DBDaoFactory.java:119) at com.szkingdom.kdap.dao.statisticre...原创 2018-03-21 15:29:35 · 3000 阅读 · 0 评论 -
kafka+zookeeper集群安装与配置(CENTOS7环境)及开发中遇到的问题解决
kafka+zookeeper集群安装与配置及问题解决(CENTOS) 具体安装配置可参考文章 ##:http://www.cnblogs.com/luotianshuai/p/5206662.htmlZOOKEEPER 集群主要配置(zoo.cfg) :tickTime=2000 initLimit=10 syncLimit=5 dataDir=/home/hadoop/...原创 2018-03-21 15:49:39 · 628 阅读 · 0 评论 -
HBASE 安装配置指南
HBASE 安装配置HBASE下载地址: http://mirror.bit.edu.cn/apache/hbase/stable/hbase-1.2.6-bin.tar.gzHBASE安装教程:http://www.yiibai.com/hbase/hbase_installation.htmlhttp://blog.csdn.net/smile0198/article/details/1766...原创 2018-03-21 15:53:24 · 717 阅读 · 0 评论 -
hive安装LLAP
hive安装LLAP参考URL https://blog.csdn.net/zhoudetiankong/article/details/73089225slider下载与编译##参考URL:https://blog.csdn.net/qingzhenli/article/details/72688539我使用的slider版本是0.92.0-incubating,下载地址:https:/...原创 2018-10-18 16:23:58 · 1988 阅读 · 0 评论 -
HADOOP安装前SSH免密登录配置(CENTOS)
1、假设master 机器需要免密访问slave1 ,slave2机器 (注意:访问的用户名和登录用户一致 如:三台机器都有hadoop用户,以下的行为都基于同一用户)在master 机器上运行 ssh-keygen运行结束以后, 默认在 ~/.ssh目录生成两个文件: id_rsa :私钥 id_rsa.pub :公钥2.导入公钥到认证文件,更改权限导入本机(master) ca...原创 2018-10-18 16:29:01 · 1078 阅读 · 0 评论 -
CENTOS 下elasticsearch集群安装配置
elasticsearch安装:参考文章:http://www.ruanyifeng.com/blog/2017/08/elasticsearch.htmlLINUX环境1、先确保安装JDK 1.82、下载 elasticsearch-6.1.2.tar.gz 安装包tar -zxvf ./elasticsearch-6.1.2.tar.gz3、sudo sysctl -w vm.ma...原创 2018-10-18 16:32:08 · 266 阅读 · 0 评论