![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据存储
文章平均质量分 80
随梦--飞
日拱一卒,功不唐捐
展开
-
zookeeper学习记录一分布式系统面临的问题
分布式环境面临的问题通信异常分布式系统需要在各节点之间进行网络通信,因此每次网络通信都会伴随着网络不可用的风险;即使各节点之间的网络通信正常,其延时也远大于单机系统。网络分区当网络由于发生异常情况,导致分布式系统中部分节点之间的网络延迟延时不断增大,最终导致组成分布式系统的所有节点中,只要部分节点之间能够进行正常通信,而另一些节点则不能–这种现象称为网络分区,俗称"脑裂"。当网络分区时分布式系统会出现局部小集群,在极端情况下,这些局部小集群会独立完成原本需要整个分布式系统才能完成的功能,包括对数据原创 2021-01-30 22:42:57 · 178 阅读 · 3 评论 -
clickhouse系列之二-SQL语法
1. 注释ch支持SQL风格和c语言风格的注释:- sql 风格的注释以--开头,直到行末;- c语言风格的注释以/*开头 ,*/ 结束;2. 关键字以下情况关键字是大小写不敏感的:标准SQL,例如SELECT ,select 都是允许的;在某些流行的RDBMS中被实现的关键字,例如,DateTime 和 datetime是一样的;以下sql可查询哪些类型关键字不区分大小写; SELECT * FROM system.data_type_families其他的关键字是区分大原创 2020-12-16 00:00:00 · 1089 阅读 · 0 评论 -
clickhouse系列之一-安装和使用
clickhouse支持多种安装方式,具体参考:参考链接另:日常学习可选择docker 安装,有官方的镜像;以下具体说明安装步骤:下载镜像docker pull yandex/clickhouse-server 默认安装最新版:可指定具体tag: docker pull yandex/clickhouse-server:20.8.9.6docker ps -a启动容器docker start 352e53ce4fc2docker exec -it 352e原创 2020-12-15 01:00:11 · 338 阅读 · 1 评论 -
TPC-DS用于Clickhouse和Doris性能测试
大致介绍TPC-DS采用星型、雪花型等多维数据模式。它包含7张事实表,17张纬度表平均每张表含有18列。其工作负载包含99个SQL查询,覆盖SQL99和2003的核心部分以及OLAP。这个测试集包含对大数据集的统计、报表生成、联机查询、数据挖掘等复杂应用,测试用的数据和值是有倾斜的,与真实数据一致。可以说TPC-DS是与真实场景非常接近的一个测试集,也是难度较大的一个测试集。Clickhouse是俄罗斯Yandex公司开源的一个非常快的数据管理系统,性能非常强悍。Apache Doris是百度开源的另一转载 2020-10-14 00:02:25 · 1062 阅读 · 0 评论