本文档详细介绍了如何在CentOS6.4上安装Pydoop，包括下载Hadoop，配置环境变量，安装依赖库，以及通过pip安装Pydoop的步骤。遵循这些步骤，你可以成功集成Python与Hadoop的HDFS和MapReduce。
1.download hadoop(http://mirror.nexcess.net/apache/hadoop/common/hadoop-1.2.1/hadoop-1.2.1.tar.gz)
2. tar -xzvf hadoop-1.2.1.tar.gz
3. export HADOOP_HOME=/opt/hadoop-1.2.1
export JAVA_HOME=/usr/java/jdk1.6.0_31
4. yum install gcc
yum install gcc-c++
yum install boost-devel
yum install python-devel
yum install openssl-devel
5. download the python pip from https://raw.github.com/pypa/pip/master/contrib/get-pip.py
python get-pip.gy
6. /usr/bin/pip install argparse
/usr/bin/pip install importlib
7. download the pydoop from http://sourceforge.net/projects/pydoop/files/Pydoop-0.11/
最低0.47元/天 解锁文章
扫一扫
206
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
