自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

Wflowerd的博客

big data相关技术分享

  • 博客(5)
  • 收藏
  • 关注

原创 hive中grouping sets的使用

GROUPING SETS:根据不同的维度组合进行聚合,等价于将不同维度的GROUP BY结果集进行UNION ALL GROUPING__ID:表示结果属于哪一个分组集合,属于虚字段 CUBE:根据GROUP BY的维度的所有组合进行聚合。 ROLLUP:为CUBE的子集,以最左侧的维度为主,从该维度进行层级聚合。 关于grouping sets的使用...

2018-10-27 20:59:34 15999 1

原创 java中 this的用法

this关键字有三个主要的作用:1、在构造方法中调用其他构造方法。比如有一个Person类,有三个构造方法,某一个构造函数中调用另外构造方法,就要用到this,而直接使用Person()是不可以的。2、返回当前对象的引用3、区分成员变量和参数变量,解决局部变量、参数变量与成员变量同名的问题。public class Person { public String name;...

2018-10-11 21:25:18 372

原创 maven加速下载依赖的解决方法

1) clean,compile,build,package,install等应用编译打包的参数。2) 四个主要组成:我是谁、我的依赖仓库源、我依赖谁、如何构建3) 镜像:mirror,核心作用:加速依赖包的下载       中央仓库:maven官方提供的仓库源       第三方开放镜像仓库:阿里云、oschina、csdn等等。       第三方不开放的仓库:收费服务     ...

2018-10-09 22:01:13 1330

原创 hive表推到mysql表的方式

1) sqoop      第三方工具包(插件plugin),实现的是hive(非关系型数据源)与关系型数据库相互传输数据的最常用组件。      其它的如datax是类似的插件。2) 自行实现      A: hive,  B:mysql      A->B之间,第一种是用API方式,第二种是用脚本方式,多见用于脚本方式。      原理:把数据通过落地到文件中转一下,实现两...

2018-10-09 21:57:29 1010 1

原创 unzip解压文件并 定向输出 遇到的细节问题

 首先查看unzip下的各个参数的用法 -u 更新文件,意为若文件存在则不会创建新的文件、-o 重写文件,无条件创建新的文件-d 将产生的文件输出 将列表内的两个.zip文件一同解压并将解压后的文件放入新的文件夹下-u  ...

2018-10-05 16:08:46 1622

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除