2010年09月_xyz2011

12月 11月 10月 09月 07月 06月 04月 03月 02月 01月

原创气质的培养

一：沉稳 1. 不要随便显露你的情绪。（俗称能装X，这点很重要，但我做的不好） 2. 不要逢人就诉说你的困难和遭遇。 3. 在征询别人的意见之前，自己先思考，但不要先讲。 4. 不要一有机会就唠叨你的不满。我有个朋友，老和我抱怨以前公司如何如何，其实他现在的工作很大程度上是拜以前公司的老板所赐，听者心里要说还真不好受。不知道感恩，满脑袋埋怨的人的确不是我的同类。...

2010-09-29 14:30:01 163

webservice打包部署

到目前开发webservice有很多的插件了，比如：axis2,mf等，我个人觉还是axis2比较好用一些。可以从网站上下载axis2:Apache Axis2 是Axis的后续版本，是新一代的SOAP引擎。Axis2的主要特点有： 1）采用名为 AXIOM（AXIs Object Model）的新核心 XML 处理模型，利用新的XML解析器提供的灵活性按需构造对象模型。...

2010-09-28 14:46:22 813

Apache Nutch是Hadoop的源头，该项目始于2002年，是Apache Lucene 的子项目之一。至2004年，Google在OSDI上公开发表了题为“MapReduce: Simplified Data Processing on Large Clusters”的论文，受到启发的Doug Cutting等人开始实现MapReduce计算框架并与NDFS(Nutch Distribu...

2010-09-27 21:13:21 315

原创不知道他们是怎么想的！

今天从经理那里听到一个糟糕的消息，我负责的那个项目暂停一段时间，听了以后，我很是迷茫。不知道为什么，在这里呆了快一年了，这个项目从开始我就一直跟着，自己一个做了一个多月了，里面的辛苦只有我一个人能体会到。现在说停就停，让人感觉十分的不舒服。后来反思了一下，里面有许多的地方自己都做的不是很好，以后尽量改正，这将是自己的一大笔财富。马上快十一了，整整一年过去了，想想在这一年里。工作、生...

2010-09-27 21:08:08 210

原创 Hadoop Shell-02

概述所有的hadoop命令均由bin/hadoop脚本引发。不指定参数运行hadoop脚本会打印所有命令的描述。用法：hadoop [--config confdir] [COMMAND] [GENERIC_OPTIONS] [COMMAND_OPTIONS]Hadoop有一个选项解析框架用于解析一般的选项和运行类。命令选项描述--config confdi...

2010-09-14 13:45:37 176

原创 Hadoop Shell-01

FS Shell调用文件系统(FS)Shell命令应使用 bin/hadoop fs 的形式。所有的的FS shell命令使用URI路径作为参数。URI格式是scheme://authority/path。对HDFS文件系统，scheme是hdfs，对本地文件系统，scheme是file。其中scheme和authority参数都是可选的，如果未加指定，就会使用配置中指定的默认sch...

2010-09-14 13:44:51 246

原创抉择中

今年7月份老婆怀孕了，本来这就是一件好事！可是我怎么就高兴不起来呢？忙完公司的事回家还得做饭，洗衣服，察地等等！哎.....在现在的这个公司里，偶尔感觉不是很累。有时候忙起来也就那么一回事，说白了就是工资低，现在好像什么都得用钱来解决。周五走的时候给上面反映了下，给否给涨工资。期望中啊........

2010-09-12 12:41:21 109

原创 hive基础

（一）：Hive 是什么在接触一个新的事物首先要回到的问题是：这是什么？这里引用 Hive wiki 上的介绍：Hive is a data warehouse infrastructure built on top of Hadoop. It provides tools to enable easy data ETL, a mechanism to put stru...

2010-09-12 12:35:26 190

原创 hadoop基础

Hadoop是什么？答：是google的核心算法MapReduce的一个开源实现。用于海量数据的并行处理。 hadoop的核心主要包含：HDFS和MapReduce HDFS是分布式文件系统，用于分布式存储海量数据。 MapReduce是分布式数据处理模型，本质是并行处理。二、多少数据算海量数据？答：个人认为，TB（1024...

2010-09-06 22:03:43 84