- 博客(3)
- 收藏
- 关注
RSS订阅原创 初识kafka
1、生产者produce的配置文件：1、ack机制：设置发送数据是否需要服务端的反馈,有三个值0,1,-1request.required.acks = -1#0: producer不会等待broker发送ack#1: 当leader接收到消息之后发送ack-1: 当所有的follower都同步消息成功后发送ack.2、在向producer发送ack之前,broker（kafka集...
2019-09-27 16:26:51
421
原创 Linux系统下如批量创建/删除文件和文件夹
（一）批量创建文件夹mkdir -p /testdata/{data,shell}lldrwxr-xr-x 2 root root 4096 9月 25 15:28 data1drwxr-xr-x 2 root root 4096 9月 25 15:28 data2（二）批量创建文件touch test{2019-06,2019-07,2019-08}-{01…05}.txt{...
2019-09-25 15:41:04
963
原创 hive中常用的函数
（一）聚合函数1、count 个数统计函数: count(*)2、sum 总和统计函数：sum(score)3、max 最大值统计函数：max(score)4、min 最小值统计函数：min(score)5、avg 平均值统计函数：avg(score)（二）窗口函数1、rank 考虑分组内数据的重复性,重复的会挤占后续的标号：rank() over(parti...
2019-09-20 09:59:13
840
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人