![](https://img-blog.csdnimg.cn/20201014180756724.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
数据开发
文章平均质量分 90
Witness__
Do not hesitate,Do it right now
展开
-
Clickhouse快速上手 使用篇
接着clickhouse原理篇,下面来介绍他的具体使用场景,包括数据导入,更新等文章目录1. 数据导入调研计划实施1. cos文件系统集成2. 编码获取2. 数据更新和使用1. 数据导入根据官方介绍,Clickhouse的分布式表数据导入有两种形式,一种是在外部将数据划分好分片,分别并行的加载到各个节点的本地表,这种速度是最快的,同时也不需要分布式引擎处理网络发送各个节点数据;另外一种是直接将数据批量插入分布式表,由分布式表引擎处理数据到各节点的写入,需要节点间的网络通信,速度稍慢,但是在实际观察中,原创 2021-04-04 13:56:45 · 844 阅读 · 0 评论 -
Clickhouse快速上手 原理篇
1. 背景公司目前使用Greenplum作为报表实时聚合查询的OLAP数据库,当时主要是其使用门槛相对较低,同时支持事务,能在用户访问时候事务更新数据,使用云厂商的产品,技术支持也不错,但随着报表单表数据量由去年十月份的6G/月到现在的60G/月,尽管我们做了很多优化, 索引 + 列存 + 优化查询 + 分析慢查询执行计划等。。。在查询的时间跨度达到3个月时候,单条查询计算需要超过10s才能返回,在并发场景下,有些需要1min多才能返回,这样严重影响了用户体验,可能用户没有看到结果就切换界面了。同时对于G原创 2021-04-04 12:00:02 · 601 阅读 · 0 评论