shtdayu的博客

Hive实现unpivot

kylin 聚合组优化--------1.简单情况--------------1.强制优化分步乘法,n个元素取m,结果m x n2^(N-X)2.层级优化将N个维度中X个维度设置为层级维度，则cuboid个数减少到 (X+1)*2^(N-X)3.联合维度（Joint Dimension）2 ^ (n-x + 1):从4个里面有三个2 ^(4-3 + 1)=4--------2.最优剪枝--------------解释:所有维度都能被剪枝1.必须维度+层级维度(层级数量+1)

#!/bin/bashstart_date=$1end_date=$2curent_date=''cur_time=''date_sub=$((($(date +%s -d "$end_date") - $(date +%s -d "$start_date"))/86400));for (( i = 0; i <= $date_sub; i++ )); do cur_time=$(($(date +%s -d "$start_date") + $((i * 86400)...

Docker 安装启动后服务无法连接:原因:docker0 ip 与 系统ip冲突# 查看ipifconfig解决方法重新绑定docker0 ip(docker0 不能设置为localhost):#修改ipifconfig docker0 10.1.2.xxx

Windows+ IDEA 本地调试Apache Kylin3.1.0源码Streaming Receiver前置条件:需要完成Windows+ IDEA 本地调试Apache Kylin3.1.0源码-运行coordinator 这篇文档的相关部署------------------------------------------------------------------------------------------------------------------------------

Windows+ IEDA 本地调试Apache Kylin3.1.0源码-Coordinator

WARN [main] org.apache.hadoop.mapred.YarnChild: Exception running child : java.lang.IllegalArgumentException: there is no valid date pattern for:8.1.0 at org.apache.kylin.common.util.DateFormat.stringToMillis(DateFormat.java:154) at org.apache.kyli...

每次打开idea_scala-library.jar异常解决方案异常出现情况:每次打开idea都会出现该异常,不管build.sbt的内容是否发生变化,只要sbt设置了auto-import每次都会重新下载更新sbt(这应该是sbt 的bug,不应该出现这种情况).解决:将sbt 取消 自动下载更新依赖功能.说明:如果需要添加新的依赖需要手动刷新sbt即可,刷新后只要重新添加lib...

Sbt配置本地私服step1.需要搭建maven私服(linux))下载https://www.sonatype.com/nexus-repository-oss网站下方nexus-repository-o免费开源版安装(解压即可)配置本地maven私服 settings.xml<servers><server>&...

#!/bin/bashsource /etc/profilesource ~/.bash_profile在脚本上加入:未加载环境变量,添加source...即可 .

写在前面:idea sbt 项目spark2.2.0cdh6.0.1elasticsearch7.2.0step1.需要sbt依赖name := "biz_xy_diy"version := "0.1"scalaVersion := "2.11.8"resolvers ++= Seq( "Cloudera Repository" at "https://...

Type mismatch: rowtype of new rel: RecordType(VARCHAR(256) CHARACTER SET "UTF-16LE" COLLATE "UTF-16LE$en_US$primary" PROVINCEALIASNAME, DOUBLE TARGET, INTEGER D, DECIMAL(17, 19) RETURNAMOUNT) NOT NULL...

Caused by: java.lang.NoClassDefFoundError: org/apache/commons/configuration/ConfigurationException解决:将commons-configuration-1.9.cf57559743f64f0b3a504aba449c9649.jar 复制到kylin的tomcat/lib 下cp /opt/cl...

. ODBC error: SQLSTATE 37000 native database error 22931. [Microsoft][SQL Server Native Client 10.0][SQL Server]正在直接执行 SQL；无游标[Microsoft][SQL Server Native Client 10.0][SQL Server]已为数据库 'hydee_xhyy' ...

解决方法:删除 extract 重新添加,重新启动即可。delete extract e1add extract e1......

java.lang.IllegalStateException: Error to load /model_desc/bs_m1.json    at org.apache.kylin.metadata.MetadataManager.reloadDataModelDescAt(MetadataManager.java:602)    at org.apache.kylin.metadata....

一、准备工作:提示：如果想要跳过第一步，直接进入第二步添加或者是修改用户名和密码。请使用该加密工具（jar包）：https://download.csdn.net/download/shtdayu/10812371Step1.创建一个maven项目 kylinStep2.添加依赖<dependency><groupId>org.springfr...

1.kylin配置 hive 使用beeline时出现异常在默认的配置文件中提示配置应为一下内容,但是配置后出现异常kylin.source.hive.client=beelinekylin.source.hive.beeline-params=-n root --hiveconf hive.security.authorization.sqlstd.confwhitelist.append...