anshengjian9380-CSDN博客

转载 rvm 版本切换

rvm list 列出版本 rvm --default xxx.xx.xx 切换版本 rvm system 使用系统默认版本 rvm --default system 使用系统默认版本转载于:https://www.cnblogs.com/wxblogweb/archive/2012/11/19/rvm_ruby.html...

2012-11-19 12:35:00 197

转载 java 自动加载配置文

@import url(http://www.cnblogs.com/Load.ashx?type=style&file=SyntaxHighlighter.css);@import url(/css/cuteeditor.css); java 自动加载配置文件 org.apache.commons.configuration包应用中一些属性来自配置文件，例如access-c...

2012-05-15 21:59:00 133

转载算法随记

@import url(/css/cuteeditor.css); 1.在计算取模时，在操作不是2的幂的数时，取模计算会出奇的慢。在数不能被10整除时，二进制计算做“%10”计算会有较大的开销且并不高效。 2.对数极算法性能极高，仅次于常数极。首先来分析一下对数极算法的特点。对数极的算法共同点是每次都将问题的规模缩减一半。性能在k=log(n)时，i次迭代时，数据规模e=2k-i...

2012-05-15 21:58:00 103

转载 Hadoop in Action 翻译第三章（文件操作命令部分）

Components of Hadoop 在上一章节我们了解了如何安装及配置Hadoop。我们了解了不同节点的作用以及这些节点是如何工作的，还了解了如何配置这些节点。现在我们可以运行Hadoop了，现在我们从程序的角度了解一下Hadoop框架。首先我们讲解HDFS，HDFS用来存储你的Hadoop应用的各种数据。之后我们讲解MapReduce框架的细节。第一章时，我们已经看到了Ma...

2011-02-19 10:14:00 120

转载 Hadoop in Action 翻译第二章续2(介绍分布式部署)

之前持续关注分布式存储和分布式计算,现在是建立完整集群的时候了.在这一节,我们将使用下面的服务器名: 1. master--- 主节点,主要用来运行NameNode和JobTracker服务. 2. backup --- 用来运行Secondary NameNode服务. 3. hadoop1,hadoop2,hadoop3…---运行DataN...

2011-01-27 17:21:00 134

转载 Hadoop in Action 翻译第二章续(介绍伪分布式)

Pseudo-distributed mode(伪分布式) 伪分布式模式就是将所有hadoop程序运行在一台服务器上.这种模式将单机模式分割为各模块,主要还是用来debug你的程序,以便于测试内存占用量,HDFS input/output问题,已经各个deamons之间的交互等等. 下面就是这种模式的配置例子: core-site.xml <?xml version=”1....

2011-01-26 15:54:00 116

转载 Hadoop in Action 翻译第二章

Starting Hadoop 内容简介: 1. Hadoop 架构中的各个模块。 2. 安装Hadoop，以及三种操作模式：单机，伪分布式，以及分布式。 3. 安装基于web的Hadoop监控工具这一章节将主要介绍如何安装Hadoop。如果你的工作不要安装Hadoop,或者已经完整安装了Hadoop，那么你也许想跳过这一章。不过...

2011-01-26 15:14:00 79

转载 Hadoop in Action 翻译第一章

Hadoop介绍内容简介: 1. 编写可扩展的,分布式的,海量数据处理的程序的基础 2. 介绍hadoop与MapREduce 3. 编写一个简单的MapReduce程序今天,我们被数据所围绕,人们上传视频,手机拍照,给朋友发信息,更新facebook状态,论坛回帖,点击广告,等等.另外,机器本身也在不停的产生大量数据.甚至...

2011-01-26 15:10:00 143

anshengjian9380的博客