- 博客(12)
- 资源 (4)
- 收藏
- 关注
RSS订阅转载 HDFS节点内数据平衡：DiskBalancer
转载地址：http://blog.csdn.net/androidlushangderen/article/details/51776103目录(?)[-]前言磁盘间数据不均衡状况的出现磁盘间数据不均衡带来的问题磁盘间数据不均衡的传统解决方案社区解决方案DiskBalancerDiskBalancer的设计核心DiskBalancer的架构设计Disco
2016-12-29 11:21:21
2738
原创 java jvm基础知识
参考：http://www.cnblogs.com/redcreen/archive/2011/05/04/2037056.html :http://lhc1986.iteye.com/blog/1421832 :http://www.cnblogs.com/xhr8334/archive/2011/12/01/2270994.htmlJVM内存回收机制简述
2016-12-28 19:15:09
337
转载 imapa 内存使用设置
Impala GuideCloudera.comTrainingSupportDocumentationDev Center|Contact UsDownloadsThis is the documentation for Impala 2.1.x, included as part of CDH 5.3.x.Latest Version of this Pag
2016-12-23 20:21:55
680
转载 Impala内存优化实战案例
Impala内存优化实战案例畅游DT时代(李珂) · 2016-03-26 01:23文章来源：中国联通网研院网优网管部——IT技术研究团队作者：李珂一. 引言 Hadoop生态中的NoSQL数据分析三剑客Hive、HBase、Impala分别在海量批处理分析、大数据列式存储、实时交互式分析各有所长。尤其是Impal
2016-12-23 20:01:09
9482
1
转载 Linux使用nc命令监控检测服务器端口
前端用apache htttpd进行发布（80端口），通过双机负载均衡转发到后端的两个tomcat进行处理（8081和8082端口），现在需要随时监控这三个端口的情况，一旦down掉需要能够立即告警处理。批量的系统监控比较好的是用nagios软件来实现，这样小项目专门装一个nagios软件，有点繁琐了。在网上查了一些资料，总结实验了一下，可以用简单的nc命令来实现。一、nc命令检测端口的用法
2016-12-20 08:51:05
1672
原创 shell map
#1、declare -A 变量名 A一定要是大写的Adeclare -A map=(["sunjun"]="a" ["jason"]="b" ["lee"]="c")echo ${#map[*]}#2、取出所有的valueecho ${map[@]}echo ${map[*]}#3、取出所有的keysecho ${!map[@]
2016-12-11 16:45:13
5567
1
原创 shell 数组
#1、shell中的数组定义#arrayName=(element1 element2 element3)#数组用小括号括起来的元素集合，个元素用空格分隔#2、数组的遍历#${arrayName[*]}strArray=("svc-manager" "admin" "sms" "log-monitor")for strElement in ${strArra
2016-12-11 15:52:52
298
原创 hdfs文件压缩
1、1.1、压缩格式总结 压缩格式工具算法文件扩展名是否可切分DEFLATE无DEFLATE.deflate否GzipgzipDEFLATE.gz否bzip2bzip2bzip2.bz2是
2016-12-10 00:42:39
1839
原创 hadoop支持lzo完整过程
简介部署安装lzop native library安装hadoop-lzo配置hadoop环境变量验证lzo通过hive测试创建lzo表导入数据索引LZO文件利用hive执行mr任务修改使用中hive表的输入输出格式简介 启用lzo 启用lzo的压缩方式对于小规模集群是很有用处，压缩比率大概能降到原始日志大小的1/3。同时解压缩的速度也比
2016-12-10 00:39:48
1200
转载 文章标题
一、 简介 history started by chad walters and jim2006.11 G release paper on BigTable2007.2 inital HBase prototype created as Hadoop contrib2007.10 First useable Hbase2008.1 Hadoop become Apache top-leve
2016-12-08 09:48:21
306
转载 HBase简介（很好的梳理资料）
一、 简介historystarted by chad walters and jim2006.11 G release paper on BigTable2007.2 inital HBase prototype created as Hadoop contrib2007.10 First useable Hbase2008.1 Hadoop
2016-12-08 09:23:31
239
转载 Apache Kafka 集群环境搭建
Apache Kafka 集群环境搭建时间 2015-01-14 16:02:21 ITeye-博客原文 http://bigcat2013.iteye.com/blog/2175880主题 Apache KafkaApache Kafka 是一个高吞吐量分布式消息系统，由LinkedIn开源。引用官网对kafka的介绍：“Apache Kafka is
2016-12-08 08:17:01
468
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人