2016年04月_qq_23660243

12月 08月 07月 05月 04月 03月 02月 01月

原创 Hive distribute 问题

今天在使用Hive的时候遇到了一个十分有这意思的问题，感觉有必要记录一下。大体情况是这样的，我数据库表中有一个mytest的表，只有一个word的string类型字符串。表格很简单，如下:里面的内容很简单，全部是字母：使用hive首先分区，分成6个(我认为这里有六种不同的字母，所以分六个桶，分别存放)，然后将结果输出到本地文件夹下。操作步骤为：set mapred.redu

2016-04-18 23:30:10 2445

原创我的hadoop大数据之路（三）

最近忙的太厉害，一直没有时间总结一下，明天休息，所以感觉是时候来一发了。这里继续hadoop的历程。本次详细讲解一下hadoop的集群模式。上次运行的实在单机的单节点情况下进行的，也就是所谓的为分布式，我的本地环境简介如下(前面是主机名，后面是ip地址，我配的是静态的，怎么配此处不做过多简介)：sun192.168.152.1jupiter192.168

2016-04-15 22:54:47 7789

原创 JMS消息队列之ActiveMQ

最近学到消息队列JMS，所以写个博客记录一下。环境这里我就不介绍了，我用的windows，并且安装了activemq的包，没有的可以自己去下载安装。然后修改包里的配置，目录在：D:\Softwares\apache-activemq-5.12.1\conf\activemq.xml，修改其中如下所示的代码：

2016-04-07 12:31:08 905

原创 linux ip地址更换自动脚本

最近linux虚拟机很烦人，由于公司和家里的网关不一样，我的桥接方式不得不来回换ip地址，了解linux的人可能知道，配置文件很深：/etc/sysconfig/network-scripts/ifcfg-eth0,至少对我来说足够深了，所以下了个bash脚本，以下为脚本内容： #!/bin/bash#注意，不建议在/etc/sysconfig/network-scripts/ifcf

2016-04-06 22:56:43 4221