xthurm-CSDN博客

原创【hadoop】HA集群时遇到的问题

【持续更新】解决一些使用HA集群遇到的问题，包括搭建、使用、开发等 1. 在格式化HDFS时报错：17/11/25 16:44:25 WARN namenode.NameNode: Encountered exception during format: org.apache.hadoop.hdfs.qjournal.client.QuorumException: Unable to

2018-01-20 11:46:38 2214

原创【hadoop】 java客户端使用append方法添加文件时报hdfs空间不足

使用java 代码 append 文件实际上是创建一个新文件与存在的文件合并，然后丢弃（这部分操作时透明不可见）。在创建新文件的时候，hdfs会预先给其划分一个 block大小的空间，即使该文件小于 block大小。所以当append的内容过小时，容易产生大量的block文件，造成资源的浪费，占用过多的空闲资源，不等操作完成，还未回收该block空间，此时hdfs系统空间不足，报错。解

2018-01-03 21:50:51 454

转载【hadoop】搭建 ha 高可用集群

本文前半部分配置高可用集群参考Hadoop HA高可用集群搭建（2.7.2），后半部分是解决在个人环境中配置遇到的一些问题。（由于遇到的问题较多，已迁移【hadoop】HA集群遇到的问题）配置HA 集群配置zk 的zoo.cfg，由于zk的master是选举的，所以zk节点的格式必须为单数且至少3个，在该集群中，只有4个节点，所以设置master2、slave1、slave2为zk节点

2017-12-16 15:41:08 234

原创【zabbix】如何在problem视图新增一列

zabbix在problem需要加一列显示群组因为运维将原先的zabbix3.2版本升级为3.4.4，所以在代码上有所更改，原先页面显示可以直接在blocs.inc.php类中更改（小强离职前改的，虽然我也没太看懂），升级后，view类目下新增了许多类，分别用于控制不同类型的视图显示，因此需要找到problem类，在生成图表的方法中加入群组那一列这里只是用到了 app/view/monit

2017-12-07 22:52:08 2083

转载 JAVA的堆排序

这连续的三个排序都是有关于大数据处理的面试题，本人手贱，当初笔试参与的是4399的数据研发，结果通知笔试后才发现真心难，只好零时抱佛脚，多看看这方面的概念以及一些笔试题面试题，也不知道能不能过他们的面试。以下这段代码我是直接从百度词条copy出来的，能用，至于效率如何，还未尝试：package demo;public class Heapsort{ private static int[...

2015-10-31 16:48:58 199

转载 JAVA的归并排序

同上篇一致，归并算法也是在笔试与面试中容易考查的一部分，为了面试我可是煞费苦心，看了很多博客，试了很多代码，终于找到一个容易理解与记忆的这是归并排序的原文地址：http://blog.csdn.net/middlekingt/article/details/8446552这是另外一位大神的代码，面试啊面试。。以下为源代码，只是贴出来让自己看看：package demo;impo

2015-10-31 16:22:28 195

转载 JAVA的快速排序

这几天参与了几次笔试与面试，发现对基础算法要求都很高，于是就特意找了一些算法来充充电。这是快速排序的原文地址：http://blog.csdn.net/wangkuifeng0118/article/details/7286332看了这位大神的代码，简洁明了，于是将他的博客转载在此，让自己有空时可以多看看，学习学习。以下为源代码（我将大神的代码合并到一起，直接就可以运行）：pa

2015-10-31 16:13:50 297

thurm的博客