- 博客(5)
- 收藏
- 关注
RSS订阅原创 Master-Worker设计模式
@(分布式计算集群) Master-Worker设计模式在生活中非常地常见，比如：督工和工人，督工给每个工人分配任务，也监督每个工人的工作情况。一般还有以下场景：如果有个工人身体不好，就重新将他的任务分配给其他人；现实中一般督工就一个，督工自己也有可能身体不好，然后呢？就没有然后了——也有可能由一个工人暂时顶替，或者再从其他小组挪一个督工，或者由一直陪同的小秘顶上。额外补充的场景是为了能够应对不
2016-09-30 06:33:16
8458
2
原创 快速配置Linux下SSH无密码登录
快速配置Linux下SSH无密码登录@(Linux配置) 使用ssh免密登录在分布式集群部署中基本上都需要，比如Hadoop集群的部署。本文简述如何快速实现多台机器ssh免密登录。准备工作配速配置前先做防火墙和selinux的关闭 针对Centos的防火墙， centos 7： systemctl stop firewalld.service #停止 systemctl disabl
2016-09-06 21:27:10
701
原创 Office2Pdf工具开发
Office2Pdf工具开发@(工程开发) 近期，由于公司内部有个组件需要完成word转pdf的功能，在网上做了基本的了解和测试，发现OpenOffice+JobConverter是比较稳定有效的方案。记录如下Office2Pdf工具开发OpenOffice简介安装启动JobConverter简介测试OpenOffice启动和关闭windowslinuxJava代码ew使用
2016-09-06 21:22:33
3141
原创 CDH5.8安装说明
CDH5.8安装说明@(Hadoop) 使用过Ambari，不知道是因为没有商业运作支撑还是社区活跃度有限，总体管理能力只能算凑合。很多Hadoop组件版本都不高，Spark也才1.3.X，Sqoop还是1.4.6.2.3，相对版本都比较低，而且管理并不算优秀。遂放弃，准备使用CDH做下测试。 CDH在版本跟踪上还是比较密切贴近Hadoop的各个模块版本，基本上在修复版本上差个一两个版
2016-09-03 15:54:03
13320
5
原创 log4j2的JsonLayout测试
log4j2的JsonLayout测试@(工程开发) 最近在开发通用的分布式日志采集器。碰到日志信息块的划分问题，尤其是碰到有异常堆栈的情况，需要做合并操作。当前我们的解决方案是使用日志块的起始时间来判断。有过萌生使用JsonLayout的想法，直接可以映射到ElasticSearch，方便创建索引，减少过多的字段切分。遂测试了log4j2的JsonLayout，网上资料还不多，简单的做下备忘。
2016-09-03 15:44:53
9641
2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人