Hadoop
西伯利亚的寒流@
优秀的判断力来自经验,但经验来自于错误的判断。
展开
-
hadoop集群搭建
第一步:搭建配置新的虚拟机格式化之前先把tmp目录下所有与Hadoop有关的信息全部删除rm -rf /tmp/hadoop-centos*开启之后jps只有Java的进程:sudo vi /etc/hosts 里面加 bogon 1.sudo赋权Root用户 vi /etc/sudoers/root n(查找下一个结果)centos ALL=(ALL) NOPASSWD:ALL2原创 2017-10-22 18:17:28 · 320 阅读 · 0 评论 -
Windows 源码编译Hadoop 2.7.4生成X64
在build 之前,仔细阅读源码根目录中的 BUILDING.txt 文件 其中 Building on Windows部分有详细说明。1.依赖软件Windows System (windows 7)JDK 1.7+ (jdk-8u65-windows-x64.exe)Maven 3.0 or later (apache-maven-3.3.9-bin)Findbugs (Fi原创 2017-12-05 17:21:26 · 947 阅读 · 0 评论 -
Linux编译Hadoop2.0生成Hadoop_X64
一、准备的资料(时间大概30min)源码根目录下有个BUILDINT.txt,打开即可看见里面关于编译hadoop的一些环境要求 64位linux系统CentOS 6.7。JDK 1.7+。 1.7以上版本maven-3.2.5。 一个项目管理综合工具, 使用标准的目录结构和默认构建生命周期protobuf 2.5.0 google的一种数据交换的格式,它独立于语言,独立于平台had原创 2017-12-05 10:33:55 · 229 阅读 · 0 评论 -
Table already exist 问题的解决(HBase删除HDFS数据)
(一) 在一些情况下,不得不对HBase数据进行暴力删除,这种情况如原始数据量特别大,而又不需要存储的时候。或者HBase无法启动等问题。 1)删除比较简单,直接调用hadoop fs -rm -r /hbase这样的命令即可实现对HDFS上存储的HBASE原始文件进行删除。(当然细划的可以删除掉某个具体的数据表)。 2)但是在删除完毕后,重启HBase后,创建数据表时候,发现出现table a原创 2018-05-05 14:55:07 · 3992 阅读 · 0 评论