[30]Presto Blog

Presto Blog Even Faster ORC Even Faster ORC-2

2019-05-16 12:48:51

阅读数 3

评论数 0

同环比与MTD/QTD/YTD月季年累计在查询引擎中的实现

一、实现环比/同比计算 (1)利用窗函数实现同比环比计算 计算每月的销量情况的场景中,我们可以窗口函数Lag计算获得上个月的销量数据: LAG(value, offset, DEFAULT) OVER () 这个函数的功能就是返回与当前行向前偏移n行的目标行的数值,如LAG(sum(price)...

2019-04-30 16:38:36

阅读数 74

评论数 0

[29]Presto window function

presto:default> select id, name, sum(age) as age_num, sum(sum(age) ) over (partition by name) from mysql.dbtest_1.student group by name,id; i...

2019-04-29 21:03:00

阅读数 16

评论数 0

MySQL Window Functions

原文:MySQL Window Functions Summary: in this tutorial, you will learn about the MySQL window functions and their useful applications in solving analyt...

2019-04-29 18:14:01

阅读数 34

评论数 0

[28]Presto 强制类型相关

HiveCoercionPolicy Coercer ExpressionAnalyzer::getOperator TypeRegistry::public Optional<Type> coerceTypeBase(Type sourceType, String r...

2019-04-28 14:07:56

阅读数 9

评论数 0

How to Write a Git Commit Message

How to Write a Git Commit Message

2019-04-16 15:48:17

阅读数 18

评论数 0

[1]Mac单机kylin安装与debug

提前 安装hadoop生态,参见 Mac单机开源软件安装备忘 Kylin 安装配置 待补充 单机debug 待补充

2019-03-24 11:33:46

阅读数 35

评论数 0

[1]Hbase-overview

HBase - Overview 原文hbase_overview Limitations of Hadoop 顺序批处理数据,简单job也要扫整个dataset Hadoop can perform only batch processing, data will be accessed o...

2019-03-22 23:03:22

阅读数 35

评论数 0

[4]Carbondata integration-presto查询carbondata

1、编译carbondata获得presto connector相关jar. 参考:CarbonData编译与可能的依赖错误 在presto(建议0.210+版本,否则spi接口不一致presto无法识别carbondata)安装目录的plugin目录下新建carbondata目录,将carbon...

2019-03-22 22:44:58

阅读数 56

评论数 0

[3]CarbonData编译与可能的依赖错误

carbondata 编译依赖错误 (1)拉取carbondata master分支build失败 Could not resolve dependencies for project org.apache.carbondata:carbondata-core:jar:1.6.0-SNAPSHOT...

2019-03-22 22:04:16

阅读数 36

评论数 0

[2]Installing and Configuring CarbonData to run locally with Spark Shell

官方文档:Quick Start Run locally with Spark Shell bin/spark-shell --jars /Users/xxx/Documents/software/carbondata/apache-carbondata-1.5.2-bin-spark2.2.1-...

2019-03-18 15:11:10

阅读数 49

评论数 0

[1]CarbonData Introduction And Docs 笔记

CarbonData Apache CarbonData is a new big data file format for faster interactive query using: advanced columnar storage, index, compression encodi...

2019-03-18 12:27:40

阅读数 30

评论数 0

Query Router(pseudo pushdown)on kylin

apache_kylin_cube_queries apache_kylin_data_source_sdk

2019-03-06 10:27:55

阅读数 31

评论数 0

Introduction to Presto Cost-Based Optimizer笔记

原文:introduction-to-presto-cost-based-optimizer Introduction TheCost-Based Optimizer (CBO)we havereleased just recentlyachievesstunning results in i...

2019-03-03 15:02:03

阅读数 63

评论数 0

Presto join enumeration笔记

原文:presto-join-enumeration Query improvements Incorporating join enumeration into Presto means that your queries can automatically run faster witho...

2019-03-03 14:37:21

阅读数 75

评论数 0

如何查询进程中占用CPU的线程

如何查询进程中占用CPU的线程 (1)命令查找进程PID top -c  或jps -v (2)找进程中的线程号 top -Hp PID (3)将线程转换成16进制(对应nid) printf %x PID 线程号 (4)查看具体的线程 jstack PID |grep 线程ID转换的4...

2019-02-28 15:38:50

阅读数 29

评论数 0

MySQL storage engine

MySQL storage engine说明文档 MySQL中存储engine决定了表的类型(Storage engines are MySQL components that handle the SQL operations for different table types),具体体现在以下...

2019-02-18 12:53:01

阅读数 55

评论数 0

PretenureSizeThreshold

最近调整项目jvm参数,慢慢整理一些平时调参的一些笔记备忘吧 XX:PretenureSizeThreshold XX:PretenureSizeThreshold超过这个值的时候,对象直接在old区分配内存 Frequently Asked Questions about Garbage Col...

2019-01-28 22:52:36

阅读数 183

评论数 0

一篇文章掌握Sql-On-Hadoop核心技术

转载自:一篇文章掌握Sql-On-Hadoop核心技术 1. SQL On Hadoop 分类 1.1 查询延时分类 在众多的 SQL On Hadoop 系统中,有必要对其进行一个分类。一般而言,用户更关心的是查询时延,根据用户提交查询到结果返回的时间长短,将 SQL 查询分为如下三类:b...

2019-01-19 07:12:41

阅读数 63

评论数 0

查询优化

查询优化 一、join Optimizer 1.1 基于CBO(Cost-Based Optimizer)的join优化 cost-based-optimizer-in-apache-spark-2-2 presto-join-enumeration join 优化 二、Hash aggreg...

2019-01-16 23:13:26

阅读数 38

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭