- 博客(3)
- 资源 (7)
- 收藏
- 关注
原创 【大数据】如何将数据导入ClickHouse?
最近在研究如何提升InfluxDB+Grafana的查询速度,因为随着数据量的上涨,查询速度逐渐变慢,采用了连续查询,也没有得到明显的效果,其实单从数据量上,采用连续查询,按道理是可以得到很好的效果的,但鉴于我们的索引也是比较多大(经查资料,InfluxDB的series不超过100000,是不会影响InfluxDB的查询性能的,然后我看我们的series已经达到了300000以上),而这些索引又是必须的,所以一直也没有在这个的基础上得到更好的解决方案,所以想着换条路走走,那就是ClickHouse,当然.
2021-08-28 21:49:50 4491 2
原创 【大数据】InfluxDB的连续查询有什么作用呢
InfluxDB尽管每秒可以处理数十万的数据,但如果长时间存储大量数据,对于存储是很大的压力。那么我们既想数据保存得久一些或者永久保存,又想减轻存储的压力,该怎么办呢,这就要用到连续查询了,其实是用连续查询和保留策略(Retention Policy 简称RP)来一起实现一、保留策略1、保留策略是什么呢保留策略指的是InfluxDB保存数据的时间,InfluxDB会比较服务器本地的时间戳和请求数据里的时间戳,并删除比在RPs里面用DURATION设置的更老的数据一个数据库中可以有多个保留策略,但.
2021-08-15 22:46:52 869 1
原创 【大数据】SpringBatch究竟是什么呢,又有何作用呢
现在有许多应用程序都需要批量处理,比如:(1)自动,复杂地处理大量信息,无需用户交互即可最有效地进行处理(2)定期应用非常大的数据集重复处理复杂的业务规则(3)从内部和外部系统接收的信息的集成,需要格式化,验证和以事务方式进行处理,记录到系统中遇到上述场景,就可以考虑SpringBatch了一、Spring Batch是什么Spring Batch是一个轻量级,全面的批处理框架,旨在开发对企业系统日常运营至关重要的强大批处理应用程序,是Spring提供的一个数据处理框架,其处理过程如下二.
2021-08-08 23:38:56 4501 4
analysis-ik.zip
2020-06-12
SpringCloud整合配置中心.zip
2020-05-23
SpringCloud与五大组件的整合.zip
2020-05-03
dubbo-admin-2.5.10.war
2020-04-29
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人