自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

空中的鱼

毛燥的孩子

  • 博客(12)
  • 资源 (1)
  • 问答 (1)
  • 收藏
  • 关注

原创 impala HA

目的:为impala jdbc提供统一的接口,作用参照http://www.cloudera.com/content/cloudera/en/documentation/core/latest/topics/impala_proxy.html步骤:安装haproxy选择一台非impalad的机器安装haproxy yum install haproxy编辑/etc/ha...

2014-12-11 17:36:39 145

原创 impala HA

impalad的机器安装haproxy yum install haproxy编辑/etc/haproxy/haproxy.cfg,参考global # To have these messages end up in /var/log/haproxy.log you will # need to: # # 1) configure syslog to accept network log events. This is done # by ad

2014-12-11 17:36:39 220

原创 impala集成LDAP

目的:为解决kerberos安全机制下的impala,resin cache kerberos tgt maxrenewlife天失效问题。说明:impala启用LDAP后,会优先选择LDAP用户密码认证,当LDAP认证失败时自动选择kerberos安全认证。步骤:关闭防火墙,设置开机不启动防火墙sudo /etc/init.d/iptables statuss...

2014-12-11 12:55:28 406

原创 impala集成LDAP

失败时自动选择kerberos安全认证。步骤:关闭防火墙,设置开机不启动防火墙sudo /etc/init.d/iptables statussudo /etc/init.d/iptables stop / sudo service iptables stopsudo chkconfig iptables off安装LDAPyum install db4 db4-utils db4-devel cyrus-sasl* krb5-server-ldap -yyum ins

2014-12-11 12:55:28 576

原创 security cdh mapreduce access hbase

执行mapreduce的用户必须是可以访问hdfs相应目录和执行mapreduce的账户,例如hive。指定hive的节点kinit获取执行权限在mapreduce main代码中加入访问hbase的权限,例如:import java.io.IOException;import org.apache.hadoop.hbase.HBaseConfiguration;impor...

2014-12-02 15:09:17 125

原创 security cdh mapreduce access hbase

2014-12-02 15:09:17 59

原创 hive gateway(client) configuration

配置hive gateway机器Caused by: MetaException(message:Could not connect to meta store using any of the URIs provided. Most recent failure: org.apache.thrift.transport.TTransportException: GSS initiate fa...

2014-12-02 14:32:46 452

原创 hive gateway(client) configuration

tiate failed at org.apache.thrift.transport.TSaslTransport.sendAndThrowMessage(TSaslTransport.java:221) at org.apache.thrift.transport.TSaslTransport.open(TSaslTransport.java:297) at org.apache.thrift.transport.TSaslClientT

2014-12-02 14:32:46 252

原创 hcatalog读取hive数据并写入hive

参考http://www.cloudera.com/content/cloudera/en/documentation/core/latest/topics/cdh_ig_table_access_mapreduce.htmlhttps://github.com/cloudera/hcatalog-examples.git命令:for jarfile in `ls /logdata/CDH-5....

2014-12-01 17:49:19 767

原创 hcatalog读取hive数据并写入hive

ata/CDH-5.2.0-1.cdh5.2.0.p0.36/lib/hive/lib/.`; do       export HADOOP_CLASSPATH="${HADOOP_CLASSPATH}:/logdata/CDH-5.2.0-1.cdh5.2.0.p0.36/lib/hive/lib/$jarfile"done  hadoop jar bigdata-mapreduce-0.0.1-SNAPSHOT.jar com.yeahmobi.bigdata.mapreduce.G

2014-12-01 17:49:19 394

原创 CDH5.0.2升级至CDH5.2.0

升级需求1.为支持spark kerberos安全机制2.为满足impala trunc函数3.为解决impala import时同时query导致impala hang问题升级步骤参考http://www.cloudera.com/content/cloudera/en/documentation/core/latest/topics/installation_upgrade...

2014-12-01 16:59:30 257

原创 CDH5.0.2升级至CDH5.2.0

loudera/en/documentation/core/latest/topics/installation_upgrade.html优先升级cloudera manager,再升级cdh1.准备工作: 统一集群root密码,需要运维帮忙操作下 agent自动重启关闭 事先下载好parcals包2.CM升级 登录cmserver安装的主机,执行命令: cat /etc/cloudera-scm-server/db.properties 备份CM数据: pg_

2014-12-01 16:59:30 152

Web前端技术(一)_JS

Web前端技术(一)_JS 介绍了javascrip的历史 javascrip对象 操作dom节点等等ppt

2011-10-23

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除