Hangout
文章平均质量分 68
Ricky_Huo
曾经是个全栈,立志于不做全栈
展开
-
使用hangout将Kafka数据实时清洗写入ClickHouse
使用hangout将Kafka数据实时清洗写入ClickHouse什么是HangoutHangout可以说是JAVA版的Logstash,可以进行数据收集、分析并且将分析后的结果写入指定的地方 项目地址什么是ClickHouseClickHouse是一个数据分析的数据库,由Yandex开源 项目地址什么是hangout-output-clickhouseha...原创 2017-12-11 12:09:17 · 18236 阅读 · 6 评论 -
Hangout with ClickHouse
当我们部门发现了ClickHouse这么一个优秀数据存储仓库后,经过了一段时间的摸索测试,就把线上大部分与数据分析相关的业务迁移到了ClickHouse上。这篇文章将会介绍我们如何通过Kafka接入Nginx日志到ClickHouse中。当然,其他的应用日志也可以参照以下逻辑将数据接入ClickHouse。我们最初使用Python脚本清洗日志写入ClickHouse,但是这样开发和维护都有一定的成本原创 2017-12-27 16:25:12 · 13542 阅读 · 5 评论 -
ClickHouse JDBC插入性能测试(基于Hangout)
ClickHouse Format Performance TEST of JDBC前言Hangout-output-Clickhouse目前支持3种形式的数据插入,Values、JSONEachRow以及TabSeparated。这三种方式最终插入SQL如下Valuesinsert into db.table (date, datetime, domian, uri,...原创 2018-03-21 11:33:52 · 23206 阅读 · 0 评论