(二)Druid细节问题

本文介绍了使用Druid版本imply-2.8.6进行数据上传与监控的相关细节。数据上传测试在/data/upload目录下进行,若数据在HDFS则不受限制,本地文件仅限于flume-01和druid-01机器。主要访问界面包括:用于SQL查询和数据导入的前端页面(http://10.142.168.88:8458),任务监控界面(http://10.142.168.88:8459/console.html),以及数据存储查看页面(http://10.142.168.88:8460/#/)。监控脚本druid_upload_monitor.sh在flume-01上通过crontab运行。注意,目前Druid不支持Hadoop的ORC数据导入。
摘要由CSDN通过智能技术生成

我安装的druid的版本是 imply-2.8.6
1.测试数据上传,测试查询数据的json格式都是在一台机器中操作的:/data/upload
数据上传(如果上传的数据在hdfs中,不存在机器的问题,如果是在机器本地的文件进行上传,只能在flume-01机器和druid-01机器进行上传,因为只有这些机器是数据节点)
2。常用的网页的访问界面地址:
http://10.142.168.88:8458 sql和页面导入数据的前端页面
http://10.142.168.88:8459/console.html 任务运行的监控界面
http://10.142.168.88:8460/#/ 数据存储的查看页面

3.有个监测导入数据的监控脚本,在flume-01上,是痛过crontab运行的

1 12 * * * /data/upload/druid_upload_monitor.sh >> /data/upload/monitor.log >&1 &

druid_upload_monitor.sh内容:

#! /bin/bash

current_dir=$(cd $(dirname $0); pwd)
cd ${current_dir}

datasource='up_stu_tag'
start_time=$(date -d "yesterday" +%F)
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值