- 博客(6)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 3.saprk集群hdfstest
基于spark的测试对50g数据进行Hdfstest,task,executor划分19/12/27 17:27:37 INFO spark.SparkContext: Created broadcast 10 from broadcast at DAGScheduler.scala:116419/12/27 17:27:37 INFO scheduler.DAGSched...
2020-01-16 10:41:54
350
原创 1.生产集群读写测试50g数据randomwriter
生产硬件规格浪潮：20核，128G，10.98TB浪潮：20核，128G，10.98TB浪潮：20核，128G，10.98TB浪潮：20核，128G，10.98TB浪潮：20核，128G，10.98TB引用1.测试集群http://note.youdao.com/noteshare?id=3332b5f14230918c41f084a1524a7a03&sub=...
2020-01-16 10:34:09
323
原创 2.mr对wordcount性能测试50g数据
1.对4.1中生成50g单词进行统计基于mr磁盘测试开始:19/12/27 16:23:45结束:19/12/27 16:26:2219/12/27 16:26:15 INFO mapreduce.Job: map 100% reduce 75%19/12/27 16:26:16 INFO mapreduce.Job: map 100% reduce 82%...
2020-01-16 10:25:19
532
原创 2.impala支持的math和聚合计算函数
impala 用法同hiveAggregate 聚合函数appx_median([DISTINCT|ALL] T col) avg([DISTINCT|ALL] col) count([DISTINCT|ALL] col) group_concat([ALL] col [, separator]) max([DISTINCT | ALL] T col) min(...
2020-01-16 10:06:25
3842
1
原创 1.hive2支持的math函数聚合计算函数
1.hive自身支持的math函数Mathematical 计算数学函数abs(DOUBLE a) acos(DECIMAL|DOUBLE a) asin(DECIMAL|DOUBLE a) atan(DECIMAL|DOUBLE a) bin(BIGINT a) bround(DOUBLE a [, INT decimals]) SELECT bround(12.25,...
2020-01-16 10:04:59
685
原创 各种bi工具支持的数据源
Superset 1M metabase 10Mredash 10Mcboard 4Kdavinci 10kpentaho 10kcboard 4k 国产1.国产cboard 2.finebi支持excel,mysql,hive,spark,impala3.supe...
2020-01-11 18:04:06
1505
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人