2014年01月_dataee

12月 11月 10月 09月 08月 07月 06月 05月 04月 03月 02月 01月

Hadoop之OutputFormat

版本：2.2版描述：OutputFormat是设置MR的结果输出写操作格式，包括如何写？写那？也就是定义写规则类代码：抽象类定义： public abstract RecordWriter<K, V> getRecordWriter( TaskAttemptContext context) throws IOException, I...

2014-01-23 16:02:38 77

Java之UncaughtExceptionHandler

概述：UncaughtExceptionHandler是为了捕获没有被捕获的异常，包括运行时异常，执行错误(内存溢出等)，子线程抛出的异常等，你可以在uncaughtException(xx)里对后续做处理包括资源释放等用法：Runnable实现：class YourRunable implements Runnable { public void run() { t...

2014-01-23 11:09:55 94

Java之wait()和notify()

概述：Java多线程并发模型中的实现可以基于wait()和notify()生产者消费者代码：消费者：class Customer implements Runnable { public void run() { while (true) { synchronized (TestConcurrentThread.lock) { if (TestCo...

2014-01-22 17:32:43 59

Mahout之Item-based应用使用

环境：<dependency> <groupId>org.apache.mahout</groupId> <artifactId>mahout-core</artifactId> <version>0.8</version></dependency>&

2014-01-21 16:41:51 83

ExecutorService使用概述

背景：java 并发中concurrent包下有很多关于并发的操作，使用最常见的为ExecutorService支持类型：CallableRunnable此两种类型中的Callable是有返回值的，那么如果很好的获取执行结果？依赖：<dependency> <groupId>org.apache.commons</groupId...

2014-01-21 14:37:11 57

Hadoop之InputFormat

版本：2.2版描述：InputFormat是为了读取的时候设置的输入格式，比如我们如果打算在MR的时候读文件那么我们就需要知道文件的路径以及每次mapper多少，InputFormat正是基于这个需求提出来的，也就是定义读取规则。用途：1.怎么读2.从那读首先看下InputFormat抽象类的定义public abstract List<Inpu...

2014-01-17 16:16:47 59

Hadoop之BloomFilter

BloomFilter概述：目的是检索元素是否在某个集合中，基于hash，速度比较快，不需要存储所有的元素，只需要按照某种方式存储hash值即可，因此比较节约内存，因此可以常驻内存加快查找速度。同时利用多个hash来解决hash冲突问题我们假定集合元素为一个列表，我们可以用一个bit列表来存储此元素是否存在，如下所示：存在为1不存在为0，不过由于hash很容易冲突，那么可以基于多...

2014-01-16 18:58:16 140

UUID在Java中的两种产生方式

需求：集群环境下需要产生uuid，uuid的作用不言而喻转发请注明出处：http://snv.iteye.com/环境：<dependency> <groupId>org.safehaus.jug</groupId> <artifactId>jug</artifactId> <version>2...

2014-01-16 11:35:23 301

在做协同的时候Mahout支持的DataModel类型

需求：基于mahout做协同那么mahout支持的DataModel类型有那些？环境：<dependency> <groupId>org.apache.mahout</groupId> <artifactId>mahout-core</artifactId> <version>0.8</vers...

2014-01-13 13:12:31 965

面试题[2]Java之String最大能存多少M文本

题目：Java中String能存的最大文本有多少M分析：String能存的文本取决于Jvm中的堆栈设置，那么除此之外还有吗？String是基于char数组存储的，他的长度为int的最大值那么理论值计算如下：2byte*Integer.MAX(2<sup>31</sup>-1)1024为2<sup>10</sup>理论值...

2014-01-10 17:09:30 3173

以ln的方式安装python2.7.2

需求：1.非root用户不过可以sudo操作2.目前系统 python为2.4.33.需要安装python2.7.2的环境安装操作步骤：1.下载Python-2.7.2.tar.bz2到需要安装的集群或者cp过去2.解压tar jxvf Python-2.7.2.tar.bz23.su到有执行sudo操作权限的用户su youraduser4.执行编译安装...

2014-01-10 10:14:52 317

面试题[1]Java之子类是否继承父类属性

Java面试题之子类是否继承父类属性？题目如下：public class Super { private int i = 10; public void execute() { System.out.println(i); } public static void main(String[] args) { SubClassA subClass = ne...

2014-01-09 11:31:46 345

HDFS Federation综述

HDFS Federation提出的背景：1.namenode单点且元数据受限于namenode的内存，且namenode没有办法水平扩展2.不支持多租户公用一个hdfs解决的问题：1.多个namenode尽管他们之间是相互独立，这样就水平扩展了namenode，使得元数据的规模不受限制2.每个namenode与所有的datanode交互这样就形成了读写负载3.每个nam...

2014-01-07 18:59:48 141

Spirng注解和dbutils集成

背景：操作关系型数据库的框架很多，其实最好的是jdbc不过开发量稍高那么有没有其他的相对合适的框架呢？此处选择了dbutils。那么就需要spring和dbutils集成，对事务要求不高，基于spring注解集成环境：<dependency> <groupId>org.springframework</groupId> <artifa...

2014-01-07 18:38:42 155

管理后台模板

管理后台模板，单页面应用方案，所有操作无需跳转采用前后端分离开发模式，上手略难更友好的交互体验，减轻浏览器负载面向全屏幕尺寸的响应式适配能力灵活的主题色配置

2018-08-03

Sqlite Developer

Sqlite Developer是SharpPlus出品的一款强大数据库管理软件。支持对sqlite3数据库的管理。Sqlite Developer是非常轻便的一种数据库管理工具，但是试用期比较短，而且注册码很难找，所以我们使用的时候需要借助一点小技巧就可以一直使用了。

2018-08-02

fourinone号称了集成了hadoop,zk,memcache,mq于一身的四不像超级神器，致力于分布式应用。别的我不懂，今儿聊一下fourinone中的分布式缓存以及分布式文件系统，说到分布式，不得不用到网络通讯，不得不提及RPC，fourinone号称只有100多K，不依赖任何第三方jar，那通讯怎么玩啊！自己用socket或者NIO实现，要知道用NIO实现一个网络通讯框架是很考验技术功底。在运行的时候需要配置文件，此配置为fourinone-4.17.10配置文件

2018-07-30

手机号段归属编码库

最新手机号段归属地数据库，手机号省份编码规则库，手机号段对应全国各省市分布情况及地区编码，同时每个号段的手机号数量，可以方便项目开发人员或运营人员获取手机号段基础数据。

2018-07-03

GChistoGC日志分析工具

GChisto是一款优秀的GC日志分析工具。解压后找到Chisto.jar通过命令行运行.可以对jvm的内存进行检测分析，特别针对om问题

2018-05-30

windows系统运行的scp，实现从Linux系统copy文件

下载后解压，得到scp.exe 执行该工具需要在命令行中运行，进入开始-.运行输入 cmd进入刚才scp解压目录。若想在任意路径下都能运行scp.exe，需要把scp.exe所在路径写入系统的环境变量PATH：右击我的电脑 -> 属性 -> 高级 ->环境变量，编辑 PATH，在最后面加上scp.exe所在目录。

2018-05-17

ikanalyzer-solr6.5.zip

solr5+和ikanalyzer集成包主要内容包括：ext.dic、IKAnalyzer.cfg.xml和stopword.dic；ik-analyzer-solr5-5.x.jar 和 solr-analyzer-ik-5.1.0.jar

2018-04-10

拼团网php源码

php,团购,拼团,微信公共号拼团,h5,代码为php版本的

2017-03-19

mysql客户端navicat

2016-10-19

Netty权威指南中文版PDF

2016-04-03

eclipse数据库插件之quantum

QuantumDB 是一个Eclipse的实现了数据库结构的显示,SQL查询等功能的插件。

2015-04-09

JsonView查看器

json 格式化查看工具，客户端的，非常小

2015-04-07

SSHSecureShellClient

SSH是一个用来替代TELNET、FTP以及R命令的工具包，主要是想解决口令在网上明文传输的问题。为了系统安全和用户自身的权益，推广SSH是必要的。 SSH是英文Secure Shell的简写形式。通过使用SSH，你可以把所有传输的数据进行加密，这样"中间人"这种攻击方式就不可能实现了，而且也能够防止DNS欺骗和IP欺骗。

2015-04-07

ecplise html编辑器tk.eclipse.plugin.htmleditor_2.2.0.jar

ecplise html编辑器tk.eclipse.plugin.htmleditor_2.2.0.jar 配合GEF插件能在eclipse里识别html的标签来方便编辑html页面。tk.eclipse.plugin.htmleditor_2.2.0.jar文件直接复制到eclipse\plugins里面即可

2015-04-07