2017年05月_dongmeima_coder

转载 svn高级使用->linux下修改冲突

命令功能使用格式checkout检出svn co URLup更新到当前URL的末端svn upadd增加svn add 文件名/目录名rm删除文件

2017-05-12 18:35:24 718

转载 Linux执行.sh文件，提示No such file or directory的问题的解决方法

Linux执行.sh文件，提示No such file or directory的问题的解决方法：Linux执行.sh文件，提示No such file or directory的问题问题描述解决方法分析原因，可能因为我平台迁移碰到权限问题我们来进行权限转换 1）在Windows下转换：利用一些编辑器如UltraEdit或EditPlus等工具

2017-05-12 18:14:42 38190 1

写过程序分布式代码的人都知道，分布式的程序是比较难以调试的，但是也不是不可以调试，对于Hadoop分布式集群来说，在其上面运行的是mapreduce程序，因此，有时候写好了mapreduce程序之后，执行结果发现跟自己想要的结果不一样，但是有没有报错，此时就很难发现问题，查找问题的方法之一就是对程序进行调试，跟踪代码的执行，找出问题的所在。那么对于Hadoop的Mapreduce是如何进行调试的呢

2017-05-12 16:10:37 568

转载 map/reduce之间的shuffle，partition，combiner过程的详解

Shuffle的本意是洗牌、混乱的意思，类似于java中的Collections.shuffle(List)方法，它会随机地打乱参数list里的元素顺序。MapReduce中的Shuffle过程。所谓Shuffle过程可以大致的理解成：怎样把map task的输出结果有效地传送到reduce输入端。也可以这样理解， Shuffle描述着数据从map task输出到reduce task输入的这段过

2017-05-12 16:05:28 982

原创 python--函数（必选参数、默认参数、可变参数、关键字参数）

# -*-encoding:utf-8 -*-#name = raw_input("please input your name:")#print "Hello", name"""小结：Python的函数具有非常灵活的参数形态，即可以实现简单的调用，又可以传入非常复杂的参数。默认参数必须指向（使用）不变对象，如果是可变对象，运行会有逻辑错误！要注意定义可变参数和关键字参数的语法：

2017-05-03 12:20:24 916

转载深入理解Python中的生成器

生成器(generator)概念生成器不会把结果保存在一个系列中，而是保存生成器的状态，在每次进行迭代时返回一个值，直到遇到StopIteration异常结束。生成器语法生成器表达式：通列表解析语法，只不过把列表解析的[]换成()生成器表达式能做的事情列表解析基本都能处理，只不过在需要处理的序列比较大时，列表解析比较费内存。

2017-05-02 17:37:26 424

转载 Python使用struct处理二进制

有的时候需要用python处理二进制数据，比如，存取文件，socket操作时.这时候，可以使用python的struct模块来完成.可以用 struct来处理c语言中的结构体. struct模块中最重要的三个函数是pack(), unpack(), calcsize()pack(fmt, v1, v2, ...) 按照给定的格式(fmt)，把数据封装成字符串(实际上是类

2017-05-02 17:36:21 412

转载 python 字符串

介绍字符串相关的：比较,截取,替换,长度,连接,反转,编码,格式化,查找,复制,大小写,分割等操作什么是字符串字符串字符串或串(String)是由数字、字母、下划线组成的一串字符。一般记为 s=“a1a2···an”(n>=0)。它是编程语言中表示文本的数据类型。通常以串的整体作为操作对象，如：在串中查找某个子串、求取一个子串、在串的某个位置上插入一个子串

2017-05-02 17:35:21 361

白夜行