2015年05月_Eric-L90

12月 11月 10月 09月 08月 07月 06月 05月 04月 01月

原创 hive1.2.0安装

安装hive本次的作业是安装hive。并且使用mysql作为元数据存储中心。首先就是hive版本的选择问题。每一个hadoop其实对于他的生态系统组件都是有要求的。比如hive的版本。可能我们使用一个很老的hadoop版本。然后安装一个最新的hive，这样可能是能用的，但肯定不是最合适的。因为一些hive特性可能老的hadoop并不支持。所以，需要选择匹配的版本。通常，我的做法是直接找cd

2015-05-31 17:37:14 959

转载 Python特殊语法：filter、map、reduce、lambda

Python内置了一些非常有趣但非常有用的函数，充分体现了Python的语言魅力！filter(function, sequence)：对sequence中的item依次执行function(item)，将执行结果为True的item组成一个List/String/Tuple（取决于sequence的类型）返回：>>> def f(x): return x % 2 != 0 and x

2015-05-25 15:12:03 649

原创 python入门之列表list删除操作

最近在看python，看到list列表的删除操作。这里简单记录一下：定义列表： a = [1,2,3,4,5,6,7] 1：remove 根据元素进行删除,这里就是找到元素5然后进行删除。而不是根据下标删除 a.remove(5) print a

2015-05-25 10:54:33 1425

原创设置开机启动脚本环境

在linux中对某个软件设置开机自启动是经常用到的。基本上就这么个流程：将开机启动脚本复制到/etc/init.d/目录下然后 chmod +x 脚本添加可执行权限然后chkconfig --add 脚本名添加自启动程序然后chkconfig 脚本名 on 开

2015-05-23 11:45:25 589

转载 java中replaceAll不区分大小写替换

http://hw1287789687.iteye.com/blog/2150897Java 中replaceAll如何忽略大小写呢?方式一:在正则表达式前面添加(?i)Java代码 @Test public void test_replaceAll33(){ String input = "I like Java,jAva

2015-05-19 09:11:09 7462

转载 MySQL执行外部sql脚本文件的命令

sql脚本是包含一到多个sql命令的sql语句，我们可以将这些sql脚本放在一个文本文件中（我们称之为“sql脚本文件”），然后通过相关的命令执行这个sql脚本文件。基本步骤如下：1、创建包含sql命令的sql脚本文件文件中包含一些列的sql语句，每条语句最后以;结尾，文件内容示例如下：--创建表，使用“--”进行注释create table 表名称(

2015-05-06 17:37:15 651

原创 cloudera manager 添加开机启动

最近在使用Cloudera manager管理hadoop集群。为了方便自动化管理，需要添加开机自动启动。从网上搜了一下，在一个安装教程中找到了一个方法。这里我用的是cloudera-manager-el5-cm5.3.2_x86_64.tar.gz进行的安装。所以默认是在/opt目录下面的。按照教程，需要做的是将/opt/cm-5.3.2/etc/init.d/

2015-05-05 16:06:00 5307 1

转载使用elasticsearch遇到的一些问题以及解决方法

转载自：http://itindex.net/detail/51176-elasticsearch-%E9%97%AE%E9%A2%98-%E6%96%B9%E6%B3%951.由gc引起节点脱离集群因为gc时会使jvm停止工作，如果某个节点gc时间过长，master ping3次（zen discovery默认ping失败重试3次）不通后就会把该节点剔除出集群，从而导致索引进行

2015-05-05 11:29:49 3836