hadoop客户端该如何配置

转载 2016年06月01日 22:05:09

Hadoop集群主要是由三部分组成的:主节点、从节点和客户端,即master、slave和client。我们在搭建hadoop集群的时候通常只考虑了主节点和从节点的搭建,却忽略了客户端。当我们搭建完成后,我们在其中的一台机器上运行wordcount或者计算π时,实际上我们已经默认将一台主节点或者一台从节点当做客户端来使用了,但是,如果我想把客户端独立,该如何单独配置客户端呢?

答案其实很简单,只要在配置slave的时候,不要把客户端添加到slave里,即客户端和hadoop集群其他的节点配置是一摸一样的,但不参与运算。
本博文转自:http://blog.csdn.net/sptoor/article/details/12621139

相关文章推荐

hadoop访问hdfs 的两种方式

hadoop 提供了两种方式对hdfs 进行访问: 1 配置客户端,后台连接到客户端进行工作 客户端的配置比较简单,只要把配置好的hadoop的namenode节点的hadoop 打包,发到另一台...
  • czw698
  • czw698
  • 2015年03月18日 13:06
  • 9795

hadoop远程客户端安装配置、多用户权限配置

hadoop远程客户端安装配置 客户端系统:ubuntu12.04 客户端用户名:mjiang 服务器用户名:hadoop 下载hadoop安装包,保证和服务器版本一致(或直接...
  • j3smile
  • j3smile
  • 2012年08月20日 19:14
  • 15332

hadoop client 客户端模式搭建

hadoop client 客户端模式搭建在实际的开发环境中,在集群环境中开发往往存在很多安全隐患,例如集群文件被误删等等,所以一般的开发工作都是本地完成开发的。本地做MR开发时,由于没有hadoop...

搭建Hadoop和Hive客户端

Hadoop&Hive客户端 1、下载客户端 分别解压到~/hadoop-yq、~/hive-yq目录下 Hadoop配置修改: vim hadoop-yq/conf/hadoop-site....

Hadoop客户端环境配置

1.  安装客户端(通过端用户可以方便的和集群交互)2. 修改客户端~/.bashrcalias hadoop='/home/work/hadoop/client/hadoop-client/ha...
  • yfkiss
  • yfkiss
  • 2011年05月03日 22:06
  • 7262

hadoop客户端该如何配置

Hadoop集群主要是由三部分组成的:主节点、从节点和客户端,即master、slave和client。我们在搭建hadoop集群的时候通常只考虑了主节点和从节点的搭建,却忽略了客户端。当我们搭建完成...
  • sptoor
  • sptoor
  • 2013年10月11日 17:38
  • 8715

Hadoop客户端环境配置

原文:http://blog.csdn.net/yfkiss/article/details/6388689 1.  安装客户端(通过端用户可以方便的和集群交互) 2. 修改客户端~/.bashr...

kettle 6.0安装并连接ORACLE,HADOOP CDH5.3.0以及hadoop客户端配置

到官网下载 下载完毕后解压,记得本机要有java环境并配置好 运行spoon.bat在linux下运行spoon.sh,亲测win7/centos6可以用 新建转换,选择输入拖出表...

Hadoop安装(含client安装)

本Hadoop案例中涉及4台机器,其中1台namenode和2台datanode构成HDFS系统,另外还有1台client。  角色定位     主机名 Namenode   master D...

和我一起学Hadoop(四):java客户端操作HDFS

Hadoop java客户端
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:hadoop客户端该如何配置
举报原因:
原因补充:

(最多只允许输入30个字)