Hadoop
文章平均质量分 51
记录个人开发与学习的心得、分享有用的经验
Betabetter
早年做iOS开发,中途做web前端与java-ee,现在做python。
热爱计算机技术,誓要当一枚程序猿。
闲余喜欢画画和看书
展开
-
Mac为什么需要编译Hadoop native
http://hadoop.apache.org/docs/r1.0.4/cn/native_libraries.html 这具链接是apache 官网的解释 简单概括就是 目前native 是32的,而我们的机器是64位的,无法兼容。 所以native这部分需要源码编译。 apache 很贴心的提供了编译包。可惜暂不支持MAC 能怎么办!!!自己自己手动编译了。 Mac编译hadoop 源码的过程真的很心塞。。。 准备的东西: hadoop src maven cmake pr原创 2021-06-30 02:16:06 · 278 阅读 · 0 评论 -
MAC 编译Hadoop Native 源码遇到的坑
1、第一个坑 [ERROR] Failed to execute goal org.apache.maven.plugins:maven-compiler-plugin:3.1:compile (default-compile) on project hadoop-annotations: Compilation failure: Compilation failure: [ERROR] /Users/judy/Downloads/hadoop-2.7.3-src/hadoop-common-proj原创 2021-06-30 02:14:38 · 468 阅读 · 2 评论 -
Mac 安装hadoop
所需要准备的工具: hadoop版本:2.7.3 Java:1.8 假如你还需要Hadoop-native的话,还需要以下这几个工具。 但是Hadoop-native不是每个用户必需的,如果不用的话,只准备上面两个就好了。 关于什么是Hadoop-native和编译Hadoop-native的方法。这里后续补上链接。。 protoc 2.5.0(必需要是这个版本) cmake maven 1、安装Java 下载Java 最新的版本https://pan.baidu.com/s/1kPDv..原创 2021-06-30 01:42:33 · 163 阅读 · 0 评论