Hadoop 2.2.0 编译

最新推荐文章于 2022-08-30 14:01:40 发布
最新推荐文章于 2022-08-30 14:01:40 发布
阅读量73 收藏
点赞数

1, 安装所需软件
  1. cmake
  2. lzo-devel
  3. zlib-devel
  4. gcc
  5. autoconf
  6. automake
  7. libtool
  8. ncurses-devel
  9. openssl-deve
sudo yum install cmake lzo-devel zlib-devel gcc autoconf automake libtool ncurses-devel openssl-deve

2, 安装maven

3, 安装protocol buffer
验证：protoc --version

4, 给Hadoop打patch, 因为Hadoop2.2.0有一个bug

Patch: https://issues.apache.org/jira/browse/HADOOP-10110

cd haddop-2.2.0-src
wget https://issues.apache.org/jira/secure/attachment/12614482/HADOOP-10110.patch; patch -p0 < HADOOP-10110.patch 

5, 编译Hadoop
mvn package -Pdist,native -DskipTests -Dtar

具体更详细的编译说明请参考大神: iloveyin
http://blog.csdn.net/iloveyin/article/details/28909771


来自 “ ITPUB博客 ” ，链接：http://blog.itpub.net/24867427/viewspace-1395682/，如需转载，请注明出处，否则将追究法律责任。

转载于:http://blog.itpub.net/24867427/viewspace-1395682/

cmr64529
关注
hadoop2.2.0编译
技术博客
02-24 625
安装依赖包 这些库啊包啊基本都会在编译过程中用到，缺少的话会影响编译，看到error了再找solution非常麻烦，提前装好一劳永逸。$ sudo apt-get install g++ autoconf automake libtool cmake zlib1g-dev pkg-config libssl-dev因为还要用到ssh，所以如果机器上没有的话，装个openssh的客户端
hadoop2.2.0编译与安装
Spark MLlib 机器学习
12-16 1665
1、hadoop2.2.0编译与安装 1.1. 基础准备 见《基础准备（Hadoop/Spark/Mahout安装准备）》。 1.2. 下载hadoop源码 hadoop官方下载地址： http://www.eu.apache.org/dist/hadoop/common/ hadoop-2.2.0下载地址 http://mirrors.cnnic.c
Hadoop2.2.0编译
zzzzzqf的专栏
03-27 506
Hadoop2.2.0编译 由于官方的hadoop只有32位的，64位系统安装就需要重新编译生成了。 操作系统 Centos 6.4 final 编译参考：http://blog.csdn.net/duheaven/article/details/16938947 1.   依赖软件 1)        hadoop-2.2.0-src.tar http://apache.fayea
第一章--hadoop2.1.0和hadoop2.2.0编译安装教程
m0_67401055的博客
08-30 298
这个库在*nix平台上叫libhadoop.so，此文件在发行的hadoop版本lib/native目录下。2.解压hadoop-2.1.0-beta-src.tar.gz源码到/usr/hadoop/ 命令如下：tar -zxvfhadoop-2.1.0-beta-src.tar.gz -C /usr/hadoop/4.解压apache-maven-3.0.5-bin.tar.gz到/usr 命令如下：tar -zxvfapache-maven-3.0.5-bin.tar.gz-C /usr/...
hadoop 2.2.0 编译运行wordcount
General_du的专栏
12-11 518
hadoop2.2.0 编译运行 wordcount
hadoop 2.2.0 源码编译笔记
codepeak的专栏
10-27 5922
apache 官方发布的hadoop 2.2.0中只包含了32bit版本，多数生产环境中使用的是64bit的环境，需要64bit的hadoop2.2，则必须自己编译。本文记录在编译过程中遇到的一些问题和相应的解决办法。 1. 系统环境 查看系统版本： uname -a Linux ** 2.6.32_1-7-0-0 #1 SMP *** x86_64 x86_64 x86_64 GNU
Hadoop 2.2.0编译安装
weixin_33806914的博客
09-21 61
添加用户及无密码访问 添加用户 adduser hadoop 设置密码 passwd hadoop 添加到sudo用户组 chmod +w /etc/sudoers echo '%hadoop ALL=(ALL) NOPASSWD: ALL' >> /etc/sudoers chmod -w /etc/sudoers su...
hadoop2.2.0编译安装
weixin_33850890的博客
04-03 89
系统版本:CENTOS6.5 2.6.32-431.el6.X86_64 1、安装JDK我这里用的是64位机，要下载对应的64位的JDK,下载地址：http://www.oracle.com/technetwork/cn/java/javase/downloads/jdk7-downloads-1880260-zhs.html，选择对应的JDK版本，解压JDK，然后配置环境变...
Hadoop 2.2.0编译安装详解
07-03
本文档主要详细介绍了Hadoop 2.2.0版本的编译安装过程。
Hadoop 2.2.0 64位native文件（重编译）
05-09
当在64位Linux系统上运行Hadoop 2.2.0时，如果遇到如性能下降、无法启动或者错误提示需要特定的native库，这时就需要使用这个预编译好的native文件夹。将这个文件夹替换到Hadoop安装目录下的相应位置，可以确保...
hadoop2.2.0-linux-64bit安装包和源码包
04-13
Hadoop 2.2.0 的安装包为预编译版本，适用于Linux 64位系统。安装步骤通常包括： - **下载安装包**：从官方或可信来源下载Hadoop 2.2.0的安装包。 - **解压文件**：使用tar命令解压下载的文件到指定目录。 - **环境...
hadoop 2.2.0 native
01-04
hadoop 64位编译后的成果，native目录 libhadoop.a libhadoop.so libhadoop.so.1.0.0 libhadooppipes.a libhadooputils.a libhdfs.a libhdfs.so libhdfs.so.0.0.0
hadoop 2.2.0编译WordCount
Matrix_Designer的专栏
12-24 1489
javac -classpath common/hadoop-common-2.2.0.jar:common/lib/commons-cli-1.2.jar:common/lib/hadoop-annotations-2.2.0.jar:mapreduce/hadoop-mapreduce-client-core-2.2.0.jar -d playground/classes/ playgroun
基于 python 实现的ios混淆脚本工具
10-01
【作品名称】：基于 python 实现的ios混淆脚本工具 【适用人群】：适用于希望学习不同技术领域的小白或进阶学习者。可作为毕设项目、课程设计、大作业、工程实训或初期项目立项。 【项目介绍】： . addNative.py 生成oc垃圾代码工具 此脚本会扫描指定目录，给OC文件添加垃圾函数，同时创建垃圾文件到/trash目录。 参数说明 --oc_folder OC_FOLDER OC_FOLDER为OC代码所在目录 --replace替换OC_FOLDER下的原文件，同时原代码会备份到脚本目录下的backup_ios目录。不指定此项垃圾代码只会放到脚本目录下的target_ios/ addNative.py里还有一些配置可以看需求手动修改，如生成垃圾文件的数量，垃圾函数的数量，忽略文件列表等，具体请查看代码顶部相关注释 renameNative.py 修改类名前缀工具 类名是引用可能较为复杂 【资源声明】：本资源作为“参考资料”而不是“定制需求”，代码只能作为参考，不能完全复制照搬。需要有一定的基础能够看懂代码，能够自行调试代码并解决报错，能够自行添加功能修改代码。
基于SOM算法对IRIS数据集分类_Learning-Som_IrisClassification.zip
10-01
基于SOM算法对IRIS数据集分类_Learning-Som_IrisClassification
06_摄影展示小程序.zip
最新发布
10-01
我们的小程序源码功能多样，涵盖社交、电商等领域。高度定制化，轻松打造专属风格。用户体验佳，界面美观操作便捷。安全可靠，保障数据与运行稳定。适合创业者、企业和开发者。提供技术支持与文档说明。快来下载，开启精彩之旅！
大学生创业计划书××信息技术公司商业计划书
10-01
大学生创业计划书××信息技术公司商业计划书
CentOS 6.5 Hadoop 2.2.0 64位编译安装教程
本文档详细介绍了如何在CentOS 6.5 64位系统上对Hadoop 2.2.0进行编译安装的过程。以下是主要步骤： 1. **环境配置**： - 设置节点IP地址：在`/etc/sysconfig/network-scripts/ifcfg-eth0`文件中，为Master、Slave...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值