ClickHouse入门（一）

最新推荐文章于 2024-06-22 18:58:22 发布
最新推荐文章于 2024-06-22 18:58:22 发布
阅读量498 收藏 1
点赞数 1
分类专栏： 大数据开发 文章标签： mysql sql 数据库 spark
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/neymar1204/article/details/117453715
版权
本文介绍了OLAP的基本概念、特点和分类，然后详细讲述了ClickHouse的适用场景、不适用场景及其核心特性，包括列式存储、向量化执行引擎、标准化SQL查询和支持的分布式架构。
摘要由CSDN通过智能技术生成

初识ClickHouse

一.从OLAP说起

    数据处理大致可以分成两大类：联机事务处理OLTP（on-line transaction processing）、联机分析处理OLAP（On-Line Analytical Processing）。OLTP是传统的关系型数据库的主要应用，主要是基本的、日常的事务处理，例如银行交易。OLAP是数据仓库系统的主要应用，支持复杂的分析操作，侧重决策支持，并且提供直观易懂的查询结果。

   OLTP 系统强调数据库内存效率，强调内存各种指标的命令率，强调绑定变量，强调并发操作；

   OLAP 系统则强调数据分析，强调SQL执行市场，强调磁盘I/O，强调分区等。     OLAP(Online analytical processing)，即联机分析处理，主要用于支持企业决策管理分析。数据库概念最初源于1962年Kenneth Iverson发表的名为“A Programming Language” (APL)的著作，它第一次提出了处理操作和多维变量的的数学表达式，后来APL语言由IBM实现。OLAP即从不懂得纬度审视数据

OLAP核心概念

1） 维

  • 维(Dimension)：人们观察事物的视角，如时间、地理位置、年龄和性别等，是单一角度概念。
  • 维的层次(Lever of Dimension)：表示维度概念基础上进一步的细分，如时间可以细分为年、季度、月三个层次。
  • 维成员(Member of Dimension)：表示维不可再细分的原子取值&#
最低0.47元/天 解锁文章
chatGPT！
关注
  • 1
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
《ClickHouse入门、实战与进阶》的创作之路
禅与计算机程序设计艺术
06-26 6970
很高兴为您推荐一本有关ClickHouse的入门、实战与进阶书籍。这本书对于那些想要深入学习ClickHouse以及数据分析的朋友们来说，是一个非常不错的选择。我相信通过阅读这本书，您会对ClickHouse有更深入的了解，并且掌握更多实用的技巧。如果您有任何问题，欢迎随时与我交流，共同进步。《ClickHouse入门、实战与进阶》，欢迎一起交流学习，共同进步！《FFmpeg原理》的创作之路_Loken2020的博客-CSDN博客另外，本文由WPS AI辅助写作。
【大数据 OLAP 技术新书推荐】 字节跳动阿里巴巴大厂资深架构师程序员多年实践经验总结《ClickHouse入门、实战与进阶》ClickHouse领域集大成之作，入门标准参考书日常工作案头必备手册
热门推荐
禅与计算机程序设计艺术
06-25 1万+
本书是ClickHouse领域的集大成之作，从基础知识、实现原理、项目实战、扩展应用4个维度全面展开，表述简练清晰、案例丰富实用，既可以作为入门的标准参考书，又适合作为案头速查手册。书中内容是作者在阿里巴巴、字节跳动多年实战经验的总结，得到了字节跳动和阿里巴巴9位大数据专家的高度评价。全书共10章，主要内容如下：第1~3章整体介绍ClickHouse概念、特性、应用场景、技术生态、快速入门和基础数据类型等基础内容，目的是从本质上揭开ClickHouse高性能背后的秘密，帮助读者快速上手实践。
OLAP分类
sgmcumt的博客
02-16 2063
OLAP系统按照其存储器的数据存储格式分类： ROLAP(Relational OLAP) 关系OLAP ROLAP将分析用的多维数据存储在关系数据库中，并根据应用的需要，有选择地定义一批实视图作为表，它也存储在关系数据库中。不必要将每一个SQL查询都作为实视图保存，只定义那些应用频率比较高、计算工作量比较大的查询作为实视图。对每个针对OLAP服务器的查询，优先利用已计算好的实视图来生成查询结果以...
OLAP的分类
ren911的专栏
02-22 1747
根据多维数据模型存储方式不同，OLAP主要可以分为两类：基于多维数据库OLAP(MOLAP)和基于关系数据库的OLAP(ROLAP)。1 MOLAPMOLAP的核心是多维数据库。在多维数据存贮方式中，OLAP的服务设施包含OLAP软件和多维数据库，数据在逻辑上按数组存贮，一般可选用超立方体或多立方体。多维数据库和关系型数据库的主要不同是存储数据的方式，关系型数据库在一系列表格和列中存储
详解 ClickHouse 的分片集群
最新发布
weixin_44480009的博客
06-22 1932
分片功能依赖于 Distributed 表引擎，Distributed 表引擎本身不存储数据，有点类似于 MyCat 之于 MySql，成为一种中间件，通过分布式逻辑表来写入、分发、路由来操作多台节点不同分片的分布式数据ClickHouse 进行分片集群的目的是解决数据的横向扩容，通过分片把一份完整的数据进行切分，不同的分片分布到不同的节点上，再通过 Distributed 表引擎把数据拼接起来一同使用。
Kylin术语
pageniao的博客
06-08 227
Data Warehouse（数据仓库） 数据仓库是一个各种数据（包括历史数据和当前数据）的中心存储系统，是BI（ business intelligence ，商业智能）的核心部件。 这里所谈的数据包括来自企业业务系统的订单、库存、交易账目、客户和供应商等来自企业所处行业和竞争对手的数据以及来自企业所处的其他外部环境中的各种数据。 Business Intelligence（商业智能） 商业智能通常被理解为将企业中现有的数据转化为知识，帮助企业做出明智的业务经营决策的工具。 为了将数据转化为知识，需要利用
OLAP分类的基本概念和基本操作
来啊 快活啊
12-20 8172
OLAP存储分类OLAP存储有多种实现方法，根据存储数据的方式不同可以分为ROLAP、MOLAP、HOLAP。ROLAP：表示基于关系数据库的OLAP实现（Relational OLAP）。以关系数据库为核心，以关系型结构进行多维数据的表示和存储。ROLAP将多维数据库的多维结构划分为两类表：一类是事实表，用来存储数据和维关键字；另一类是维表，即对每个维至少使用一个表来存放维的层次、成员类别等维的描
Clickhouse 入门
weixin_38166318的博客
11-30 975
clickhouse 简介 ck是一个列式存储的数据库，其针对的场景是OLAP。OLAP的特点是： 数据不经常写，即便写也是批量写。不像OLTP是一条一条写 大多数是读请求 查询并发较少，不适合放置先生高并发业务场景使用 , CK本身建议最大一秒100个并发查询。 不要求事务 click的优点 为了增强压缩比例，ck存储的一列长度固，于是存储的时候，不用在存储该列的长度信息 使用向量引擎 , vector engine ，什么是向量引擎？ https://www.infoq.cn/article/col
01_尚硅谷大数据技术之ClickHouse入门V1.01
08-04
【尚硅谷大数据技术之ClickHouse入门V1.01】主要介绍了ClickHouse的基本概念、特点、功能、存储引擎、写入能力以及数据分区与并行处理能力。ClickHouse是一款由Yandex开发的列式存储数据库管理系统（DBMS），主要...
ClickHouse及快速入门.pdf
10-31
ClickHouse是一款专为在线分析处理查询(OLAP)设计的列式数据库管理系统(DBMS)。它的主要特点是针对大规模数据集的实时查询，尤其适合复杂的分析任务。与传统的行式数据库不同，ClickHouse采用列式存储方式，这在处理...
ClickHouse入门学习笔记
11-12
ClickHouse是一款高性能的列式存储数据库管理系统（DBMS），由俄罗斯的Yandex公司于2016年开源，主要用于在线分析处理查询（OLAP）。它使用C++编程语言编写，适用于大数据场景，尤其是实时分析和报表生成。相较于行...
常见OLAP分类
shengjk1的博客
10-31 1431
1.OLAP分类2.OLAP常见的一些操作 1.上卷（Roll Up）/聚合：选定某些维度，根据这些维度来聚合事实，如果用SQL来表达就是select dim_a, aggs_func(fact_b) from fact_table group by dim_a. 2.下钻（Drill Down）：上卷和下钻是相反的操作。它是选定某些维度，将这些维度拆解出小的维度（如年拆解为月，省份拆解为城市），之后聚合事实。 3. 切片（Slicing、Dicing）：选定某些维度，并根据特定值过滤这些维度的值，将原来
OLAP类别
xzq111的专栏
02-22 750
    联机分析处理（OLAP）。联机分析处理是一种普通查询活动，它不仅能够提供源自数据仓库的文本型和数子型数据，而且能够提供被许多OLAP销售商引为例证的有关查询和呈现的特殊维度形式，OLAP销售商所提供的都是非关系型方法，通常都建立在明确的多维数据立方体基础之上。OLAP数据库又称多维数据库(或MDDB)。根据数据处理方式和聚合程度不同，OLAP分为下面三种类型1.ROLAP   MOLA
OLAP分类的基本概念
BI 商业智能 的专栏
05-17 4677
OLAP有多种实现方法，根据存储数据的方式不同可以分为ROLAP、MOLAP、HOLAP。ROLAP：表示基于关系数据库的OLAP实现（Relational OLAP）。以关系数据库为核心，以关系型结构进行多维数据的表示和存储。ROLAP将多维数据库的多维结构划分为两类表：一类是事实表，用来存储数据和维关键字；另一类是维表，即对每个维至少使用一个表来存放维的层次、成员类别等维的描述信息。维表和
说一说有哪些类型的OLAP数仓？
GabrielCP的博客
01-16 892
1.按数据量划分 对一件事物或一个东西基于不同角度，可以进行多种分类方式。对数仓产品也一样。偏实时的分析型数仓，Cloudera的Impala、Facebook的Presto和Pivotal的GreenPlum均属于这类系统；如果超过百亿级别数据量，那么一般选择离线数仓，如使用Hive或Spark等（SparkSQL3.0看起来性能提升很明显）；对于数据量很小的情况，虽然是分析类应用，也可以直接选择普通的关系型数据库，比如MySQL等，“杀鸡焉用牛刀”。 2.按建模类型划分 下面我们主要关注数据量中等的分析
clickhouse--行列转换
liuyingying0418的博客
05-13 8799
clickhouse行专列与列转行的方法
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值