Kylin增量cube build的restAPI的时间不准确的BUG

最新推荐文章于 2022-05-15 10:56:35 发布
最新推荐文章于 2022-05-15 10:56:35 发布
阅读量3.4k 收藏 4
点赞数 2
分类专栏： kylin olap 文章标签： kylin olap bigdata
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/xiaolinzi007/article/details/78293061
版权
本文介绍了在使用Kylin 1.6版本中，通过REST API进行增量cube构建时遇到的时间不准确问题。具体表现为设置的构建时间与实际执行时间相差8小时。原因是服务器端源码使用固定的GMT时区，而前端UI会根据配置进行时区转换。解决方案包括在调用API时手动转换时区或修改Kylin代码以动态获取配置的时区。作者还探讨了Kylin设计的可能意图，并建议文档中明确此问题，以帮助REST API用户避免困惑。
摘要由CSDN通过智能技术生成
Kylin1.6增量cube build的restAPI的时间不准确的bug:
描述：使用restAPI:curl -X PUT -u "ADMIN:KYLIN" -H "Content-Type:application/json;charset=utf-8" -d '{"startTime":1508601600000,"endTime":1508688000000,"buildType":"BUILD"}' http://172.17.60.45:7070/kylin/api/cubes/bi_dispatch_waiting_service_cube/rebuild
增量构建时间设置【2017-10-22~2017-10-23 】，但是实际时间cube的构建抽取数据时间确比设置时间提前1天(实际上是提前8小时)【2017-10-21 ~2017-10-22 】，但是使用kylinUI构建却没有问题，实际查看kylin源码发现，
最低0.47元/天 解锁文章
xiaolinzi007
关注
专栏目录
Kylin原理与代码实例讲解
AI天才研究院
05-30 1005
Kylin原理与代码实例讲解 1.背景介绍 1.1 大数据时代的挑战 随着数据量的爆炸式增长,传统的数据处理和分析方法已经无法满足现代企业对实时性、可扩展性和高效率的需求。大数据时代带来了前所未有的机遇和挑战,迫切需要一种新的解决方案来应对海量
kylin之java调用Rest Api接口
lzlnd的博客
09-19 1162
1.官方文档 http://kylin.apache.org/docs15/howto/howto_build_cube_with_restapi.html http://kylin.apache.org/docs15/howto/howto_use_restapi.html 常用的接口有： 1）获取segment列表 GEThttp://host:port/kylin/api/cub...
Ubuntu Kylin 时区及时间异常问题修复
blueisman的专栏
07-28 847
简单方法 修改系统时间： sudo date -s "12:00 2020-7-10" 复杂长效方法 修改时区 sudo tzselect 选择Asian-》China-》Beijing Time 字符界面按提示输入数字项即可。 修改用户配置文件~/.profile 添加如下内容： TZ='Asia/Shanghai' export TZ NTP授时服务： sudo ntpdate -u 120.25.108.11 sudo ntpdate -u ntp服务器（IP） 建议使用IP地址。 中国可用
kylin restfulApi
喜上眉梢
10-13 790
kylin restfulApi
5-Kylin Java Restful API
u013385925的专栏
09-25 786
最近在做大数据方面的开发, 学习研究了一段时间的kylin系统, 对于前端开发需要使用 RESTful API ,但是官网并没有提供详细的Java  API. 经过几天的看文档,最终写出了 Java 的API,不敢私藏,特分享与大家. 1 import java.io.BufferedReader; 2 import java.io.InputStream; 3 import
调用kylin的restAPI接口构建cube
weixin_30603633的博客
08-15 570
调用kylin的restAPI接口构建cube 参考：http://kylin.apache.org/docs/howto/howto_build_cube_with_restapi.html 1. 调用cube的构建操作 curl -X PUT -H "Authorization: Basic QURNSU46IUB3c3VPOTAtQw==" -H 'Content-Type: appli...
kylin 增量更新cube设置
Shibuwodai_的博客
02-09 3741
完整脚本，亲测没有问题 #!/bin/bash -   cubeName=daily_monthly_alive   today=`date +%Y-%m-%d`   tdTs=`date -d "$today 08:00:00" +%s`   endTime=$(($tdTs*1000))   curl --user ADMIN:KYLIN -X PUT -H 'Conte...
Kylin的Cube构建与维护
理解Kylin Cube的概念 ## 1.1 什么是Kylin Cube Kylin Cube是一个开源的分布式分析引擎，主要用于对大数据集进行多维分析。它使用了列式存储和MOLAP(多维在线分析处理)引擎，可以为用户提供快速的交互式查询体验...
Kylin Cube的建立与更新策略
通过对数据进行预聚合和存储优化，Kylin可以大幅度减少查询的响应时间，并提供毫秒级的实时查询体验。 ### 1.2 为什么建立和更新Kylin Cube是重要的 在大规模数据分析环境中，传统的SQL查询往往无法满足性能需求。...
Kylin中RESTFUL API接口
weixin_41828144的博客
04-29 1308
问题描述：目前通过Java代码对kylin(Version 2.6.1)中的model、cubes等实现自动化构建，不在Web界面去操作。查看官网(http://kylin.apache.org/docs/howto/howto_use_restapi.html)的接口文档,在实现Load Hive Tables功能时，一直报错500 for url，具体报错界面如下： 这是实现接口的代码 ...
kylin REST API的使用
臭臭猫
04-28 1003
这篇文章将用sales的数据，用REST API的方式来使用kylin。 1. 查询 我是微软雅黑 size=6 color=gray 1.1 认证 1.2 查询 1.3 列出可查询表 二、cube操作 2.1 列出所有cube 2.2 获取cube信息 2.3 获取cube数据模型 2.4 创建cube 2.5 禁用cube 2.6 激活cube 2.7 清空cube 三、...
kylin-cube: 使用REST api来build, 自动构建cube
eyeofeagle的博客
04-19 1698
获取用户名密码： 被base64加密后的格式： UserName=ADMIN Password=KYLIN baseUsernamePasswd=`python -c "import base64; print base64.standard_b64encode('$UserName:$Password')"` 1, build/rebuild cube curl -X PUT \ -H "Au...
OpenWrt之时区设置（夏令时设置）
hzlarm的博客
05-09 8017
OpenWrt之时区设置详解 今天遇到一个客户关于设置时区问题。涉及到夏令时区，查阅一些资料终于搞明白了。记录如下： 因为openwrt是基于linux内核。所以记录一下Linux的时间和时区设置。 Linux的时间和时区设置 在linux中与时间相关的文件有 /etc/localtime : 是用来描述本机时间的，内容为Asia/Shanghai或者Etc/UTC等 /etc/timezone ：是 用来描述本机所属的时区。 /usr/share/zoneinfo/* ： 存放着不同时区格式的时间
Kylin新建cube一直停留卡死在第一步，等了几个小时没反应
u012029519的博客
11-15 2211
我用的版本的kylin2.5.0, hadoop环境为hdp3.0  hadoop3.1的， 试过更换kylin版本为2.5.1， 更换完后结果问题是一样的，卡住在build cube第一步上   查了下后台的日志，一直在刷这几句，前台任务那里看不到有日志 我的ambari环境是正常的，麻烦大家有时间的话帮忙看下...
数据分析引擎之Kylin学习笔记
四国棋客
05-15 909
文章目录理论知识介绍架构REST Server查询引擎(Query Engine)路由器(Routing)元数据管理工具(Metadata)任务引擎(Cube Build Engine)特点安装配置和启动bin/find-spark-dependency.shtomcat/conf/server.xml启动与关闭web界面使用数据准备创建Kylin项目创建Model创建Cube查询编写Kylin SQL时的注意事项每日自动构建Cube脚本Cube构建原理维度和度量Cube和CuboidCube存储原理Cub
湖南麒麟kylin3.3修改时区
龚帅立的博客
03-10 1729
1.查看服务器使用的时间类型 shell> timedatectl 查看时区tzselect shell> tzselect 3.修改时区的方法 创建链接文件,或者复制相应的时区文件，替换系统时区文件 shell> ln -sf /usr/share/zoneinfo/Asia/Shanghai /etc/localtime timedatectl修改时区 sh...
Kylin 使用RESTful API进行cube的增量更新
polaris_1的博客
01-16 5479
一、生成鉴权文件，之后每一步都需要使用cookfile.txtcurl -c cookfile.txt -X POST \ -H "Authorization:Basic QURNSU46S1lMSU4=" \ -H "Content-Type: application/json" \ http://hostname:7070/kylin/api/user/authenticationADMIN:K
Kylin定时增量build
10-13 8522
#!/bin/bash ################################################################################################################### ## 脚本功能：之前脚本任务完成后，使用Kylin命令，增量更新Kylin cube ## 修改历史： # #####
kylin build cube 的时候 数组越界问题
最新发布
03-08
对于这个问题，我可以回答。在 kylin build cube 的过程中，如果出现数组越界问题，可能是由于数据源中存在异常数据或者数据格式不规范导致的。解决方法可以通过检查数据源，对异常数据进行清洗或者调整数据格式来解决。
评论 5
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值