- 博客(4)
- 资源 (5)
- 收藏
- 关注
RSS订阅原创 cloudera manager和cdh目录空间报警解决
相信使用cloudera manager管理集群最先遇到的一个问题就是目录空间不够默认路径都在系统盘，系统盘一般不会很大。所以最笨的办法是安装包的路径和各个组件输出路径配置到其他大的目录，但这种方式不利于维护！我现在都是所有报警目录都做软链接到大的磁盘目录，如，/data目录空间较大，挂了一个2个T的磁盘，可以软链接到这，如 mv /dfs /data/ ln -s /data/dfs /dfs
2015-10-27 10:50:42
5487
原创 cloudera manager下的hive权限配置
前言公司运营、BI以及财务不同部门不同人员需要hive数据查询服务，所以需要分配不同的权限给相关人员权限配置主要涉及两项：认证(authentication)：验证用户所用的身份是否是对的授权(authorization)：验证用户所用身份操作是否有权限cloudera集成的hive认证支持常用的LDAP和kerberos，授权使用的是他自家的sentry，sentry目前还处在孵化中。为了推
2015-10-10 15:49:40
6400
原创 cloudera集成kafka
CDH这个大包没有将kafka集成进来，所以单独来说下kafka既然kafka没有被集成进来，为什么添加服务的时候能看到有kafka 所看到的其实是Kafka Custom Service Descriptor (CSD)，这仅仅是一个kafka服务的描述和相关的配置参数，真正的安装包需要单独下载步骤本文所使用版本见（cloudera manager和cdh离线安装）主页->主机->Parce
2015-10-06 19:48:53
2379
原创 cloudera manager和cdh离线安装
cloudera manager和cdh离线安装前言之前使用apache hadoop版本安装部署集群，需要自己控制各个组件版本，以及添加节点和服务要花很多时间，所以使用cloudera来进行安装和管理，以及后期方便维护与升级。目前我厂集群正式环境使用的是这种方式组件介绍cloudera公司在apache hadoop发行版基础上，bug fixs和加入额外的一些组件，整体测试打包发行的版本叫CDH
2015-10-02 15:07:20
2906
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人