自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

Java海洋

不定期分享Java、大数据等技术,个人成长、知识变现等

  • 博客(4)
  • 资源 (30)
  • 收藏
  • 关注

原创 hadoop 四种压缩格式

1 gzip压缩优点:压缩率比较高,而且压缩/解压速度也比较快;hadoop本身支持,在应用中处理gzip格式的文件就和直接处理文本一样;有hadoop native库;大部分linux系统都自带gzip命令,使用方便。缺点:不支持split。应用场景:当每个文件压缩之后在130M以内的(1个块大小内),都可以考虑用gzip压缩格式。譬如说一天或者一个小时的日志压缩成一个gzip 文件...

2016-09-22 15:39:41 9220 1

转载 flume 性能优化

如图1所示,一个flume-ng agent主要包括source,channel和sink三部分,三部分运行在Java JVM中,JVM一般运行在linux'操作系统上,因此,这些因素都可能影响最终的性能。flume-ng性能优化与架构设计,简单来讲,也主要包括以上部分。1, 主键的参数设计1.1 source的配置有时候不需要每台主机均安装flume agent,可以和s

2016-09-22 14:26:39 3050

转载 开源日志系统比较:scribe、chukwa、kafka、flume

1. 背景介绍许多公司的平台每天会产生大量的日志(一般为流式数据,如,搜索引擎的pv,查询等),处理这些日志需要特定的日志系统,一般而言,这些系统需要具有以下特征:(1) 构建应用系统和分析系统的桥梁,并将它们之间的关联解耦;(2) 支持近实时的在线分析系统和类似于Hadoop之类的离线分析系统;(3) 具有高可扩展性。即:当数据量增加时,可以通过增加节点进行水

2016-09-20 14:54:42 4172

原创 Spark的三种分布式部署方式

目前Apache Spark支持三种分布式部署方式,分别是standalone、spark on mesos和 spark on YARN,其中,第一种类似于MapReduce 1.0所采用的模式,内部实现了容错性和资源管理,后两种则是未来发展的趋势,部分容错性和资源管理交由统一的资源管理系统完成:让Spark运行在一个通用的资源管理系统之上,这样可以与其他计算框架,比如MapReduce

2016-09-18 19:17:22 6611

Storm分布式实时计算模式 完整版

Storm分布式实时计算模式 完整版,不是完整可以直接评论,保证!

2016-05-30

《快学Scala》 完整版

完整版的scala入门书籍,《快学Scala》

2016-05-30

jcrop 插件裁剪图片demo

jcrop 插件裁剪图片demo,demo压缩包里有完整例子,部署到Apache下,直接可以看到效果

2015-04-30

hadoop-eclipse-plugin-1.0.3.jar

window系统下用indio版本的Eclipse可以成功连上集群并运行例子

2014-09-23

prob工具和messages_zh_CN.properties

tomcat监控工具prob及转换中文文件messages_zh_CN.properties,经测试确实可用,相应的使用方法可在本人博客找到,时间大概在这个上传后几分钟

2014-04-22

linux系统下32位JDK

linux系统下32位JDK,在linux系统下在JVM平台开发程序的必须要安装的

2014-03-21

jrobin-1.5.9.1.jar

tomcat等WEB项目javameloday监控需要的jrobin-1.5.9.1.jar

2014-03-13

javamelody-1.16.0.jar

tomcat等WEB项目javameloday监控需要的jar

2014-03-13

JFreeChart用到的三个JAR

里面有三个JAR包,两个是必须的:jcommon-1.0.17.jar,jfreechart-1.0.14.jar;第三个是整合struts2时用到的:struts2-jfreechart-plugin-2.3.14.jar;

2013-07-10

定时调度框架JAR包quartz-2.0.2.jar

定时调度框架quarts的JAR包,很好用

2013-03-13

JAVA定时调度框架-Quartz使用入门到精通.doc

一个很好的调度工具学习资料,可以定时调用发送短信,上传文件等功能,JAR包后面有

2013-03-13

java 中反射工具类和讲解

很常用,也很全面的一个反射工具类,并带有对每个方法讲解的文档

2012-11-13

dwr.3.0.jar

实现DWR框架必须的jar包,DWR框架可以很好的实现ajax效果

2012-09-20

获取汉字拼音的JS

可以很好的获取汉字的拼音,汉字的全拼和首字母拼

2012-08-21

把wsdl文件或地址转化成java代码工具

在myeclipse下的一个web程序,把wsdl文件转化成java代码

2012-08-21

导入excel工具类和相应的jar包

很详细的导入excel工具类和相应的jar包,很详细,实现的方法很多

2011-09-28

详细的导出pdf工具类和jar包

详细的导出pdf工具类和jar包 ,工具类中好几中实现方式

2011-09-28

导出excel详细资料,jar和实现类

很详细的导出excel工具类,能够应用不同的实体类,还有相应的jar

2011-09-28

java3D技术,java非常最新的技术和3D动画链接

最新的 java3D 技术 java非常最新的技术和3D动画链接放在一起

2011-02-25

android 教程

很到位的分析,很真实的技术,android学习的好资料

2011-02-14

140个java经典案例

很好java学习资料,很系统,很容易上手

2011-01-22

Firefox, IE5, IE5.5, IE6, IE7, IE8多种浏览器兼容的问题

Firefox, IE5, IE5.5, IE6, IE7, IE8多种浏览器兼容的问题,解决以上浏览器存在的兼容问题

2011-01-20

动态检索,同时实现拼音检索的三个js 文件:control.js,pinyin.js,pinyincontrol.js

现拼音检索的三个js 文件:control.js,pinyin.js,pinyincontrol.js

2011-01-17

导出,下载excel包poi_3.2.jar

导出,下载excel包poi_3.2.jar,很常用的一种导出excel方式

2011-01-17

导出,下载excel包jxl.jar

导出,下载excel包jxl.jar,很常用的一种导出excel的方式

2011-01-17

java导出页面表格数据到excel表

一个完整的导出html页面数据到excel表内,超简单

2011-01-11

myelipse快捷键

很实用的快捷键,增加工作效率,一个人是否懂得较多快捷键,很大程度上体现了他的技术水平

2010-12-17

搜索引擎开发实例详细设计文档

本搜索开发实例详细分析了整个开发的流程和关键技术,其中有图片和画图。

2010-05-15

xml文档的解析采用最流行的DOM4J技术

本资源详细地描述了XML文档的解析方法,讲述了最流行的解析XML文档方法:DOM4J.

2010-05-15

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除