![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop
Chen6810
这个作者很懒,什么都没留下…
展开
-
Hadoop2.X Yarn框架原理及运作机制
<link rel="stylesheet" href="https://csdnimg.cn/release/phoenix/template/css/ck_htmledit_views-e2445db1a8.css"> <div class="htmledit_views&转载 2018-07-31 15:59:01 · 240 阅读 · 0 评论 -
hadoop能用到的系统端口
hadoop能用到的系统端口 hadoop系统部署时用到不少端口。有的是Web UI所使用的,有的是内部通信所使用的,有的是监控所使用的。实际系统中可能用于防火墙的端口设计。一些内部通信用的端口可能也需要外部能访问。如两个集群的数据对拷。1.系统8080,80 用于tomca...转载 2018-08-05 16:36:10 · 257 阅读 · 0 评论 -
Hadoop学习笔记
配置历史服务器 (查看监听已经运行完成的MapReduce任务的执行情况) mapred-site.xml mapreduce.jobhistory.address master.bigdata.com:10020 mapreduce.jobhistory.webapp.address master.bigdata.com:19888...原创 2018-08-06 14:35:09 · 288 阅读 · 0 评论 -
如何更改htpd的默认网站目录
操作步骤:1、vi /etc/httpd/conf/httpd.conf找到 DocumentRoot "/var/www/html" 这一段 #apache的根目录把/var/www/html 这个目录改为/home/wwwroot/web1/htdocs再找到 <Directory "/var/www/html"> #定义apache /var/www/html这个区域把...原创 2018-08-10 17:30:32 · 742 阅读 · 0 评论 -
一步步教你Hadoop多节点集群安装配置
转载地址:http://www.cnblogs.com/lanxuezaipiao/p/3525554.html1、集群部署介绍1.1 Hadoop简介 Hadoop是Apache软件基金会旗下的一个开源分布式计算平台。以Hadoop分布式文件系统HDFS(Hadoop Distrib...转载 2018-08-02 10:52:38 · 3402 阅读 · 0 评论 -
HDFS Java API使用之获取FileSystem对象
package com.ibeifeng.hadoop.senior.hdfs;import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.FileSystem;public class HdfsApp { public static FileSystem getFileSystem() th...原创 2018-08-07 15:15:01 · 703 阅读 · 0 评论 -
HDFS Java API使用之读取文件内容
package com.ibeifeng.hadoop.senior.hdfs;import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.FSDataInputStream; import org.apache.hadoop.fs.FileSystem; import org.apache.hadoo...原创 2018-08-07 16:40:43 · 3981 阅读 · 0 评论 -
ambari安装遇到的问题
ambari 安装Hortonworks HDP 时在检测host时异常。 The following hosts have Transparent Huge Pages (THP) enabled。THP should be disabled to avoid potential Hadoop performance issues. 解决办法,linux下执行代码 echo never &...原创 2018-08-13 13:36:21 · 1242 阅读 · 0 评论