自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(7)
  • 资源 (5)
  • 收藏
  • 关注

原创 scala 处理各类时间格式汇总

日期处理格式备份:object GetPostTime { val month = "[A-Z][a-zA-Z]{1,9}" val year = "\\d{4}" val twoNum = "\\d{1,2}" val pattern1 = s"($twoNum $month $year)".r //1 April 2018 val patter...

2019-11-08 17:07:08 874

翻译 GraphX编程指南(spark2.4)

本文是在学习graph的时候顺便翻译为中文,以便以后查阅,如果大家阅读过程中发现问题,请大家指正。thx目录概述开始属性图属性图示例图操作图操作概览属性操作结构操作连接运算邻域聚合Aggregate Messages (aggregateMessages)Map Reduce 三元组过度指南(遗留)计算度Collecting Neighb...

2018-12-14 16:33:58 706

原创 kafka 重复数据读取原因

       之前一直遇到kafka数据读取重复的问题,但都通过一些方式去避免了,今天专门去探究了下原因。出现这个问题,一般都是设置kafkaoffset自动提交的时候发生的。原因在于数据处理时间大于max.poll.interval.ms(默认300s),导致offset自动提交失败,以致offset没有提交。重新读取数据的时候又会读取到kafka之前消费但没有提交offset的数据,从而导致读...

2018-08-07 16:57:32 5970 2

原创 Ambari 2.4.1 安装HDP 2.5中遇到的问题解决

本人是Ambari新手,第2词安装Ambari及HDP,上次次安装比较顺利,因为服务器上比较干净没有残余,这次是由于想使用spark2.0,本来从ambari从2.4.0升级到2.4.1,及HDP从2.4.2升级到2.5都很顺利,但是在使用spark2.0时程序老报错,我就想再使用spark1.6.2试试,但之前把这个版本从Ambari中删除了,就要重装,再加上手贱又把spark2.0也从amba

2016-09-27 14:02:47 4866 1

原创 从window访问hbase的问题

windows 不能远程访问Hbase,通常都是由于windows 中的hosts文件没有配置hbase的重定向,在host中加入如下配置:171.221.173.195 master     171.221.173.195为Hbase的服务器ip,master为机器名如果配置了也不能访问,考虑hosts文件的问题,在hosts文件中配置127.0.0.1 www.baidu.co

2016-07-11 18:02:24 657

原创 扩展DailyRollingFileAppender使其支持限定日志文件的数量

本文用于备忘直接上代码:package hirebigdata.spider.linkedin.utils;import org.apache.log4j.DailyRollingFileAppender;import org.apache.log4j.FileAppender;import org.apache.log4j.Layout;import or

2015-10-08 14:52:48 1455

原创 对hadoop中copyFromLocalFile 的小测试

刚开是学习hadoop,运行一个hadoop文件复制相关的小例子:public class CopyFile { public static void main(String[] args) throws IOException {  // TODO Auto-generated method stub  Configuration conf =new Configuration(

2013-01-22 16:07:53 6302 5

activeMQ测试程序

基于spring + maven的activeMQ测试程序,包含activeMQ的点对点的多种形式。

2016-01-24

java程序员面试宝典(第一版)

本书是国内市场上唯一介绍Java程序员求职面试技巧的图书和案例库。本书从实际出发,将Java程序员面试中常会考到的一些编程基础性问题,比如final、super类、构造函数等最易考到的基础考点,放在第2部分Java程序设计里面,希望能切切实实解决实际问题。   面试题通过一道题考一个专类方面的能力。说起Java,人们首先想到的是Java编程语言,然而事实上,Java是一种技术,它由4个方面组成:Java编程语言、Java类文件格式、Java虚拟机和Java应用程序接口(JavaAPI)。从面试者的角度来讲,一个测试也许能从多方面揭示应试者的素质,至少你能了解应试者所掌握类的水平。   市面上流行的面试书籍在此专业性的分类方面做得不够,正因为如此,《Java程序员面试宝典》一书中追求的是程序员求职背后的一些东西:对于技术的本质理解,而不仅限于对Java技术的单纯讲解。   本书包括但不仅限于Java程序员面试。对求职市场面试做了妥善分类后,将面试对象分为软件开发人员、网络工程师、测试工程师和系统管理员(又包括操作系统管理员和数据库管理员等)。实际上市面上流行的面试书籍仅对软件开发人员比较侧重,而忽略网络工程师和测试工程师,而现实情况是在诸如趋势科技、思科等公司的面试中,对网络方面的考题日趋增加,在银行、金融公司的面试中对系统管理员方面的考题也占很大的比重。本书就这一方面给出详细论断,并结合大量考题分析题目特点给出应试方案。本书将在这些方面做出改进,以适应市场需求。   同时本书对外企经常考到的UML及设计模式内容也做了深入的分析,并在上一本书《程序员面试宝典》的基础上从本质上诠释面试的真谛。

2012-07-11

用java做的p2p聊天软件

这是用java做的基于网络编程的聊天软件,包括客户端也服务器两个部分,很适合初学者学习网络编程。

2011-12-17

Android应用开发详解

作为一本Android应用开发书籍,本书既适合Android初学者,也适合具备了一定Android开发经验但需要开发案例的高级读者。 本书分为三个部分,共18章,由浅入深地详细介绍了Android的每个开发细节。 本书基础翔实,实例丰富,案例真实。从基础到案例覆盖了Android应用开发的三大领域:基础应用、网络应用和游戏应用。读者所需要学习的,正是本书描述的。

2011-07-07

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除