- 博客(3)
- 收藏
- 关注
RSS订阅原创 HBase 监控及优化
最近有一些时间，一直在想，如果有几百台甚至上千台Hadoop集群，需要怎么来监控？ 监控的意义是为了了解整个集群的状态是否良好，以便考虑是否需要扩容，配置是否需要调整等等。但是如果几百台上千台集群，即使我们有监控，怎么能够快速了解集群状态呢？ 以下我自己根据我自己一些经验来谈谈，我们拿HBASE来做例子，之前我写了几篇对HBASE内部分析的文章，但只涉及部分HBASE的东西，希望今天能更全面一点。...
2018-03-23 15:40:57
1520
原创 elasticsearch X-PACK
x-pack为elasticsearch, logstash, kibana提供了监控，报警，用户认证等功能，属于一个集成的插件。如果不使用X-PACK，自己来监控的话通常是使用zabbix+ API监控和报警。 但是ES默认不需要用户和密码登入，如果ES环境比较大，权限控制还是比较重要，也算是穿了件衣服，不那么容易曝光。X-PACK的安装不做具体介绍，参考官网：https://www.elast...
2018-03-04 16:25:52
6263
原创 ELK数据字段映射
ES的索引的建立过程通常是先建立索引，然后添加mapping关系，最后进行POST,PUT,GET等操作。那么filebeat以及logstash和ES交互的时候mapping关系是怎么定义呢？先说说filebeat，之前提到过，这个东西是个采集器，虽然也有output功能，但是由于没有拆分字段的能力(module功能是否可以拆分还有待确定, 暂时没也打算去用这个功能)，因此采集到的日志一行就是一...
2018-03-01 20:23:41
3194
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人