BigData
CL有毒
这个作者很懒,什么都没留下…
展开
-
Logstash/Filebeat->Logstash->Kafka->Spring-kafka->MongoDb->Spark日志收集和处理
Logstash/Filebeat->Logstash->Kafka->Spring-kafka->MongoDb日志收集和处理Logstash/Filebeat->Logstash->Kafka->Spring-kafka->MongoDb日志收集和处理1. 背景1.1 ELK1.2 为什么不用ELK2. Agent(Fileb...原创 2018-03-01 11:09:04 · 2263 阅读 · 0 评论 -
MongoDB 定时删除数据
MongoDB 定时删除数据MongoDB 定时删除数据mongo删除范围数据TTLexpireAfterSeconds: xxexpireAfterSeconds: 0crontabmongo删除范围数据mongo删除一个范围的数据有点麻烦的,不能直接用remove方法,只能先查出来满足条件的文档,再逐个删除。如果需要删除某个范围,特别是时间范围的数...原创 2018-03-06 17:46:04 · 8001 阅读 · 1 评论 -
【spark】Could not initialize class org.apache.spark.internal.config.package$
Could not initialize class org.apache.spark.internal.config.package$Could not initialize class org.apache.spark.internal.config.package$问题描述解决思路总结问题描述有一个spark sql项目,使用local[*]模式测试,在本地...原创 2018-08-30 16:03:29 · 5886 阅读 · 0 评论