bigdata
Im灬大神
这个作者很懒,什么都没留下…
展开
-
zookeeper集群搭建
1.安装jdk,配置环境变量(略)2.安装zookeeper1.下载,解压,改名为:zookeeper(略)在zookeeper中创建data logs 文件夹mkdir /usr/local/zookeeper/datamkdir /usr/local/zookeeper/logs2.复制zoo_sample.cfg改名zoo.cfgcp /usr/local/zookeep...原创 2018-12-29 16:18:00 · 92 阅读 · 0 评论 -
kafka集群搭建
1.前提:安装zookeeper可以参考 : https://blog.csdn.net/qq_43338182/article/details/853405772.安装kafka1.下载,解压,改名(kafka)略我使用的是:kafka_2.11-0.10.2.1.tgz2.修改配置文件vim /usr/local/kafka/config/server.properties...原创 2018-12-29 16:54:13 · 117 阅读 · 0 评论 -
hive安装
1,hadoop安装参考:https://blog.csdn.net/pucao_cug/article/details/71773665本博主的所有大数据相关都不是原创,都是参考别人的,再这里只是做一笔记;2,mysql安装hive需要mysql,自己安装;mysql安装可以参考:https://blog.csdn.net/qq_43338182/article/details/851...转载 2019-01-03 13:06:13 · 109 阅读 · 0 评论 -
使用spring-boot 操作hbase
在网上找了好久spring-boot 操作hbase的,没有找到,所以自己总结一下,这里只有简单的操作可以下载这个项目自己跑一下码云地址:https://gitee.com/q1277782574/HbaseTest.git配置很简单:修改成自己的zookeeper地址即可:可以跑测试,也可以起动项目访问controller...原创 2019-01-08 17:03:45 · 1521 阅读 · 1 评论 -
hadoop
1.org.apache.hadoop.io.nativeio.NativeIO$Windows.createDirectoryWithMode0(Ljava/lang/String;I)V我是在windows上出的错解决此问题的方法就是使用适合自己版本的 hadoop.dll 和 winutils.exe,配置环境变量即可;我linux上的hadoop版本是2.9.2 用的是2.8.3...原创 2019-03-06 09:05:26 · 127 阅读 · 0 评论 -
hadoop的安全模式
Exception in thread "main" java.lang.RuntimeException: org.apache.hadoop.hdfs.server.namenode.SafeModeException: Cannot create directory /tmp/hive/root/e0983731-1f96-496c-b669-964693f049d4. Name node ...原创 2019-03-13 16:00:21 · 1479 阅读 · 0 评论