2011年10月_jessezhang1981

Python关键语法要素笔记

简单的读书笔记，随手记录 1、元组是不能改变的；列表可以改变：insert、remove、append2、逻辑操作符a) 身份操作符：is进行对象比较，只有引用相等才为true。速度快，内存存储地址的比较；常用语 is None>>> a = ['abc',123]>>> b = ['abc',123]...

2011-10-27 22:39:15 93

原创 Python关键语法要素笔记

简单的读书笔记，随手记录1、元组是不能改变的；列表可以改变：insert、remove、append2、逻辑操作符a) 身份操作符：is进行对象比较，只有引用相等才为true。速度快，内存存储地址的比较；常用语 is None>>> a = ['abc',123]>>> b = ['abc',123]>>> a is bFalse

2011-10-27 22:35:50 645

在Linux下安装Python

在Linux下安装Python的操作相当简单，按如下步骤操作即可： 1、在官方网站下载python安装包，这里注意python.org/download路径被屏蔽，需要使用www.python.org页面上的中文“下载”链接进行下载。这里下载了python最新的3.2.2版本：Python-3.2.2.tgz下载后，文件目录在/home/python/下，这...

2011-10-26 23:49:09 91

原创在Linux下安装Python

在Linux下安装Python的操作相当简单，按如下步骤操作即可：1、在官方网站下载python安装包，这里注意python.org/download路径被屏蔽，需要使用www.python.org页面上的中文“下载”链接进行下载。这里下载了python最新的3.2.2版本：Python-3.2.2.tgz下载后，文件目录在/home/python/下，这也是我python的安装目

2011-10-26 23:44:45 569

利用Ant构建Hadoop高效开发环境

最近Hadoop的研究中，都是利用Mockito来模拟数据进行，下一个阶段需要在Hadoop服务器上做大量的运行进行验证，同时也要为正式使用做准备。今天考虑使用Ant来搭建一个Hadoop的开发和调试环境，不使用hadoop自带的插件。思路如下：1、利用Ant在开发机器上将代码编译、打包，最终得到可执行的jar包。2、利用Ant的SSH属性，将jar包传...

2011-10-23 23:10:54 78

原创利用Ant构建Hadoop高效开发环境

最近Hadoop的研究中，都是利用Mockito来模拟数据进行，下一个阶段需要在Hadoop服务器上做大量的运行进行验证，同时也要为正式使用做准备。今天考虑使用Ant来搭建一个Hadoop的开发和调试环境，不使用hadoop自带的插件。思路如下：1、利用Ant在开发机器上将代码编译、打包，最终得到可执行的jar包。2、利用Ant的SSH属性，将jar包传到hadoop

2011-10-23 23:05:43 2639 2

Python下载地址

托GFW的福，Python编程语言的下载目录竟然被墙。这个问题已经很久了。。。不过官方网站很人性化，专门提供了一个中文的下载路径。中文路径中将二级目录的download（www.python.org/download/）改为了getit（www.python.org/getit/）。看来老外比中国人还知道心疼中国人啊，嘿嘿 GFW这个误杀人所众知，但仍然不见其改变啊。。。...

2011-10-22 21:51:03 76

原创 Linux时间同步

Linux时间同步部署Hadoop集群，遇到各个linux服务器的时间不同步的问题，于是研究了一下linux的时间同步方式，特将同步方式，总结如下：A、前提条件a) 网络是连通的，这个不用解释撒，呵呵b) DNS服务器是正常的，可以通过ping来测试，如果出现unknow host，则需要设置DNS服务器。设置DNS的方式：-----

2011-10-22 14:33:41 635

Linux时间同步方式记录

Linux时间同步部署Hadoop集群，遇到各个linux服务器的时间不同步的问题，于是研究了一下linux的时间同步方式，特将同步方式，总结如下：A、前提条件a) 网络是连通的，这个不用解释撒，呵呵b) DNS服务器是正常的，可以通过ping来测试，如果出现unknow host，则需要设置DNS服务器。设置DNS的方式：...

2011-10-22 14:29:55 91

chp6_MapReduce工作机制_20111016

MapReduce工作机制 1. 剖析MapReduce的工作运行机制 2. 失败Tasktracker失败：失败检测机制，是通过心跳进行检测。主要有：（1）超时：mapred.tasktracker.expiry.interval属性设置，单位毫秒（2）黑名单机制：失败任务数远远高于集群的平均失败任务数。...

2011-10-16 19:42:09 77

原创 chp6_MapReduce工作机制_20111016

MapReduce工作机制 1. 剖析MapReduce的工作运行机制 2. 失败Tasktracker失败：失败检测机制，是通过心跳进行检测。主要有：（1）超时：mapred.tasktracker.expiry.interval属性设置，单位毫秒（2）黑名单机制：失败任务数远远高于集群的平均失败任务数。失败

2011-10-16 19:38:51 844 1

chp5_MapReduce应用开发_20111011

MapReduce应用开发1. MapReduce程序开发步骤编写map 和 reduce 程序–> 单元测试 -> 编写驱动程序进行验证-> 本地数据集调试 -> 部署到集群运行用到的工具：Junit、Mockito、Ant 2. 使用Configuration关键点：1、 Configu...

2011-10-16 16:43:50 70

原创 chp5_MapReduce应用开发_20111011

MapReduce应用开发1. MapReduce程序开发步骤编写map 和 reduce 程序–> 单元测试 -> 编写驱动程序进行验证-> 本地数据集调试 -> 部署到集群运行用到的工具：Junit、Mockito、Ant 2. 使用Configuration关键点：1、 Configuration类可以加载配置文件，包括系

2011-10-16 16:43:04 627

jessezhang1981的专栏