![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hdfs
文章平均质量分 81
羽毛不会飞
但是拥有翅膀的鸟儿,能够展翅高飞!
展开
-
zookeeper3.4.6部署(集群模式)最全保姆级教程
Zookeeper 分布式服务框架是 Apache Hadoop 的一个子项目,它主要是用来解决分布式应用中经常遇到的一些数据管理问题,如:统一命名服务、状态同步服务、集群管理、分布式应用配置项的管理等。本文将从使用者角度详细介绍 Zookeeper 的安装和配置文件中各个配置项的意义,以及分析 Zookeeper 的典型的应用场景(配置文件的管理、集群管理、同步锁、Leader 选举、队列管理等),用 Java 实现它们并给出示例代码。系统环境:CentOS 7集群环境: 虚拟机。原创 2024-08-16 19:19:05 · 673 阅读 · 0 评论 -
从大数据研发的角度解决org.apache.hadoop.security.AccessControlException: Permission denied: user=***,不需修改集群配置文件
前言: 该异常的解决方法在网上确实已经很多了,但是楼主们都没有考虑到一个问题么?那就是身为大数据研发团队的我们,有权限轻易的去修改hadoop集群的配置文件么?就算有权限修改,万一耦合度较高的文件被修改,我们要去哭着求运维帮我们擦屁股么?很显然小编这篇小短文是在不动运维配置好的配置文件的基础上,解决远程提交hadoop任务出现的AccessControlException,跟...原创 2018-09-18 10:57:03 · 9139 阅读 · 6 评论 -
数据仓库架构简述与设计
一、数据仓库是什么数据仓库是面向主题的 集成的 相对稳定的 反映历史变化的数据集合;是为企业所有级别的决策制定过程,提供所有类型数据支持的战略集合。它是单个数据存储,出于分析性报告和决策支持目的而创建。 为需要业务智能的企业,提供指导业务流程改进、监视时间、成本、质量以及控制。二、数据仓库建设目的收集海量数据要用于访问 需要以各个方面方便地对数据进行切片及切块 业务人员需要方便的获...原创 2019-03-10 18:14:03 · 739 阅读 · 0 评论