hadoop
文章平均质量分 86
Jenrey
这个作者很懒,什么都没留下…
展开
-
面试题--精选Hadoop选择题
精选Hadoop选择题1、下列哪个属性是hdfs-site.xml中的配置?A、dfs.replicationB、fs.defaultFSC、mapreduce.framework.nameD、yarn.resourcemanager.address解答:dfs.replication是HDFS集群的副本个数,一般放置在hdfs-site.xml2、Hadoop-2.6.5集群中的HDFS的默认的数据块的大小是?A、32M B、64MC、128MD、25...原创 2020-11-21 12:36:42 · 5110 阅读 · 0 评论 -
hadoop基础集群的安装
说明:该文章以4台centos系统为案例配置hadoop基础集群,节点名字分别为hadoop02,hadoop03,hadoop04,hadoop051.基础集群环境准备1.1修改主机名在root用户下:vi /etc/sysconfig/network或者如何配置了hadoop账户的sudo权限,则在hadoop登陆情况下使用命令 sudo vi/etc/sysconfig/network修改里...原创 2018-03-22 21:09:25 · 419 阅读 · 0 评论 -
hadoop2.7.5搭建高可用集群
本文目的:搭建hadoop的高可用集群集群规划1.下载 hadoop-2.7.5-centos-6.7.tar.gz 安装包2.通过CRT软件上传到hadoop02号机器3.解压软件到apps目录下tar -zxvf hadoop-2.7.5-centos-6.7.tar.gz -C ~/apps/4.修改hadoop-env.sh 配置文件先查看jdk安装路径echo $JAVA_HOME vi...原创 2018-03-25 11:47:53 · 1947 阅读 · 1 评论 -
HDFS的shell常用命令大全
1.启动相关 启动zookeeper: zkServer.sh start 启动HDFS : 不管在集群中的那个节点都可以 start-dfs.sh 启动YARN : 只能在YARN主节点中进行启动 start-yarn.sh HDFS : http://hadoop02:50070 YARN : http://hadoop05:80...原创 2018-03-28 21:35:49 · 2947 阅读 · 0 评论 -
hadoop的eclipse的使用安装
1.把插件名为 hadoop-eclipse-plugin-2.7.5.jar 放在ECLIPSE_HOME/plugins 目录下2.把 hadoop-2.7.5-centos-6.7.tar.gz 解压到本地电脑3.在本机配置windows环境变量 HADOOP_HOME=C:\myProgram\hadoop-2.7.5 必须要配置的。 path加入:%HADOOP_HOME%\bin;4...原创 2018-03-23 10:28:13 · 3183 阅读 · 0 评论