- 博客(2)
- 问答 (3)
- 收藏
- 关注
原创 elasticsearch可视化kibana中索引字段不显示
一 、问题描述索引结构如下图所示:其中ipcid对应的是数据采集设备的编号,我想要在kibana中统计各个设备下的数据量并通过饼图展示。于是,根据kibana操作流程: 1.首先创建visualize,选择饼状图。如下图所示: 2.选择需要操作的index 3.选择索引后,界面会自动跳到如下界面: 4.接下来就是选择需要统计的字段,就是前面所说的ipcid。点击Split slices->A
2017-12-26 11:06:37 15439
原创 spark 批量读取HDFS(hive分区)parquet文件
情况说明:数据以parquet文件形式保存在HDFS上,数据中的某一列包含了日期(例如:2017-12-12)属性,根据日期对数据分区存储,如下图所示: 项目需求: 在项目中想要读取某一个月的数据,肿么办? 解决方法: spark中读取本地文件的方法如下:sparkSession.read.parquet("hdfs://path")方法一: 要读取多个文件,文件的路径中有一段公共路径
2017-12-18 16:38:19 14802 1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人