- 博客(8)
- 问答 (1)
- 收藏
- 关注
原创 hue——hbase、hive的使用
hue入口:http://hue服务器地址:8888/about/hue默认端口号8888账号:xxxx密码:xxxxhue作用,提供给大数据用户一个web端,访问大数据集群1、 hbase web端的使用l hbase hue入口如图,data browsers选项中会有hbase选项,直接点进去就好 l 点进来后会看到我们集群hbase中的所有...
2017-12-28 09:50:20 9150
原创 CDH集群对外需要开放的端口整理
一个CDH集群对外开放的端口有哪些?哪些是必须对外开放的端口?那些是按需开放的?哪些是生产上线是需关闭的?下面是一些初步的接口整理: ServicePort REMARKHOSTNAMEAdmin Console 的 HTTP 端口7180对外/对内Spa
2017-12-24 20:36:47 12489 2
原创 服务器hostname解析错误,ERROR [Cache] Unable to set localhost. 解决
根据字面意思就可以找到解决方法,没能set localhost,那我们就让它指向localhost方法:修改/etc/hosts我们直接将hostname指向127.0.0.1就行了
2017-12-21 14:34:08 1955
原创 jvm基础(1)
要了解内存分配机制,首先要有如下几个概念:1、程序计数器 当前单线程执行程序的字节码行号,相当于执行步骤编号 2、java虚拟机栈 线程私有,生命周期与线程相同,用于存储局部变量表、操作栈、动态链接、方法出口等信息3、本地方法栈 与java虚拟机栈功能相同,为虚拟机使用的本地方法服务4、java堆 多线程共享区域,主要用来存对象实例,Java...
2017-12-21 09:33:27 221
原创 hbase参数调优 hbase.hregion.max.filesize
hbase.hregion.max.filesize我们知道,hfile存储数据是按column family存储的,也就是任何一个列蔟存储值大于这个参数,都会发生hbase的split,这个值过大,读写hbase的速度会变慢,因为底层对hdfs的读写操作由于文件数量少,很难做到高并发,高吞吐,过小会发生频繁的文件split,split会使数据短暂offline,会对数据的访问有一
2017-12-11 11:44:07 8011 2
原创 hue web报错 400 'json' or 'msgpack' parameter is required
hue web端访问报错 :400 'json' or 'msgpack' parameter is required原因:根据返回错误码,用消息进行搜索,说明它是fluentd中的flu_in_http中包含的错误消息,服务器确实有fluentd在跑,可推测8888端口正在继续被td-agent监听,查看确实是这个错误解决方法:sudo pkill -f td
2017-12-04 21:29:36 1762
原创 关于open file limit问题解决
如果遇到open file limit问题Configuration of maximum open file limit is too low: 1024 (expected at least 32768). Please consult https://goo.gl/LgvGFl修改方法:(1)ulimit -HSn 102400这只是在当前终端有效,退
2017-12-01 09:22:50 14575
原创 postgresql建库授权
CREATE USER tracy WITH PASSWORD 'tracy';CREATE DATABASE tracy OWNER tracy;GRANT ALL PRIVILEGES ON DATABASE tracy TO tracy;开启远程访问1、编辑配置文件文件:postgresql.conf
2017-12-01 09:21:17 1115
空空如也
求助:kettle连接cdh510-hbase报错问题
2017-07-12
TA创建的收藏夹 TA关注的收藏夹
TA关注的人