2019年06月_Simple_Zz

08月 07月 06月 01月

原创 Hive 时间函数

to_date：日期时间转日期函数 select to_date('2015-04-02 13:34:12'); 输出：2015-04-02 from_unixtime：转化unix时间戳到当前时区的时间格式 select from_unixtime(1323308943,’yyyyMMdd’); 输出：20111208 unix_timestamp：获取当前unix时间戳 select un...

2019-06-30 18:24:04 16881

原创 Hive Joins详解【left / right / full / left semi】

Hive官方语法 join_table: table_reference table_factor [join_condition] | table_reference {LEFT|RIGHT|FULL} [OUTER] JOIN table_reference join_condition | table_reference LEFT SEMI JOIN table_r...

2019-06-30 16:49:10 387

原创 Hive Fetch.task

Fetch抓取是指，在 hive-default.xml.templaet 文件中，hive.fetch.task.conversion 属性。该属性在 Hive 中对某些情况的查询可以不使用 MapReduce 计算，而使用 fetch task 来执行。 <property> <name>hive.fetch.task.conversion</na...

2019-06-26 08:50:52 249

原创 Hive 建表语句

Hive 建表语句 CREATE [EXTERNAL] TABLE [IF NOT EXISTS] table_name [(col_name data_type [COMMENT col_comment], ...)] [COMMENT table_comment] [PARTITIONED BY (col_name data_type [COMMENT col_comment], ....

2019-06-25 21:22:27 2014

Hive优化.docx

Join 查找操作的基本原则：应该将条目少的表/子查询放在 Join 操作符的左边。原因是在 Join 操作的 Reduce 阶段，位于 Join 操作符左边的表的内容会被加载进内存，将条目少的表放在左边，可以有效减少发生内存溢出错误的几率。 Join 查找操作中如果存在多个 join，且所有参与 join 的表中其参与 join 的 key 都相同，则会将所有的 join 合并到一个 mapred 程序中。

2019-07-01

分布式一致性原理与实践

介绍了几种分布式协议，重点讲解Zookeeper高可用服务搭建。

2018-09-02

阿里Java开发规范

2017年10月14日杭州云栖大会，Java代码规约扫描插件全球首发仪式正式启动，规范正式以插件形式公开走向业界，引领Java语言的规范之路。目前，插件已在云效公有云产品中集成，立即体验！（云效>公有云>设置->测试服务->阿里巴巴Java代码规约）。