2017年02月_蘑菇丁

12月 11月 10月 09月 08月 07月 06月 05月 04月 03月 02月 01月

原创查询抵消sql

SELECT EXECUTIONS , DISK_READS, BUFFER_GETS, ROUND((BUFFER_GETS-DISK_READS)/BUFFER_GETS,2) Hit_radio, ROUND(DISK_READS/EXECUTIONS,2) Reads_per_run, SQL_TEXT FROM V$SQLARE

2017-02-21 16:26:25 703

原创统计表大小

SELECT owner, segment_name, SUM(bytes /1024/1024 /1024) sum FROM dba_segments GROUP BY owner,segment_name having SUM(bytes /1024/1024 /1024) >2 ORDER BY 3 DESC

2017-02-21 16:25:45 345

原创 YCSB测试hbase

下载YCSB软件 wget https://github.com/downloads/brianfrankcooper/YCSB/ycsb-0.1.4.tar.gz 解压 tar xf BigDataBench_V3.2.1_Hadoop.tar.gz cd /opt/BigDataBench_V3.2.1_Hadoop_Hive/BasicDatastoreOperatio

2017-02-21 16:23:39 2230

翻译 cdh5.10新特性

https://www.cloudera.com/documentation/enterprise/release-notes/topics/cdh_rn_new_in_cdh_510.html#impala_new_features 一、hbase 1.已添加复制调试功能。 2. G1垃圾收集性能得到提高二、hive 1.自动配置所有组件的S3的Hue连接。三、Impal

2017-02-13 17:59:58 3275

转载 flume监控spoolDir日志到HDFS整个流程小Demo

1.编写Java代码，随机生成用户ID号码，区县号码，乡镇号码(区县和乡镇号码用随机的三位字母表示)和个人总收入格式样例：779362a1-bf04-468a-91b6-a19d772f41fa####AFC####sfe####8091748。 2.用一个线程循环执行,用Thread.sleep(100)来控制线程执行一次停止100ms，防止cpu在死循环中过载，一秒生成10条数据，用log4

2017-02-07 17:33:25 1285

转载 hue

Hue是cdh专门的一套web管理器，它包括3个部分hue ui，hue server，hue db。hue提供所有的cdh组件的shell界面的接口。你可以在hue编写mr，查看修改hdfs的文件，管理Hive的元数据，运行Sqoop，编写Oozie工作流等大量工作。 HUE官方地址http://gethue.com/ 默认基于轻量级sqlite数据库管理会话数据，用户认证和授权，可以自定义

2017-02-07 16:09:19 933