2014年05月_wangmm0218

12月 11月 10月 09月 08月 07月 06月 05月 04月 03月 02月

原创 hadoop-2.4.0.tar.gz linux64位环境下编译完成的安装包分享

hadoop-2.4.0.tar.gz linux64位环境下编译完成的包分享由于

2014-05-22 20:31:04 5998 8

原创如何编译Apache Hadoop2.4.0源代码

如何编译Apache Hadoop2.4.0源代码

2014-05-22 19:11:07 6152 2

转载 Flume日志收集

转：http://blog.csdn.net/zhouleilei/article/details/8568147

2014-05-13 02:00:29 847 1

转载了解chmod和chown命令的用法

这两个对于初学者很容易混肴，这里ch，其实是change的简写，它们的含义分别是：chown-》change own改变所有者chmod-》change mod(mod不知道是否为简写)改变文件权限一、chown 命令用途：更改文件的所有者或组。命令由单词change owner组合而成。使用示例：1，更改文件的所有者： chown jim program.

2014-05-12 15:41:47 1142

转载大数据架构：flume-ng+Kafka+Storm+HDFS 实时系统组合

个人观点：大数据我们都知道hadoop，但并不都是hadoop.我们该如何构建大数据库项目。对于离线处理，hadoop还是比较适合的，但是对于实时性比较强的，数据量比较大的，我们可以采用Storm，那么Storm和什么技术搭配，才能够做一个适合自己的项目。下面给大家可以参考。可以带着下面问题来阅读本文章：1.一个好的项目架构应该具备什么特点？2.本项目架构是如何保证数据准确性的？3

2014-05-09 20:56:30 9336 2

原创 Sonar的安装

Sonar是开源的代码质量管理平台,它把代码质量相关软件集成到一起统一管理,集成的软件如下:CPDCheckstyleCloverCoberturaFindbugsGeneralGoogle analyticsPMDSquidSurefire我把安装过程记录下来.1.环境准备如下redhat6jdk1.7mysql5.

2014-05-09 20:52:07 1348

原创解决openoffice进程异常退出的办法

第一步：将openoffice.sh脚本放置在root目录下面，（也可自行决定），如图所示: 第二步：赋权限 chmoda+x openoffice.sh 第三步：编辑crontab文件命令行输入：crontab –e 输入如下内容：*/5 * * * * /bin/sh/root/openoffice.sh 注：每5分钟

2014-05-09 20:32:18 11895 1

原创 jenkins调整jdk版本不生效的解决办法

jenkins调整jdk版本不生效的解决办法yoyu

2014-05-08 15:57:03 22671

转载 Sqoop-1.4.4工具import和export使用详解

Sqoop可以在HDFS/Hive和关系型数据库之间进行数据的导入导出，其中主要使用了import和export这两个工具。这两个工具非常强大，提供了很多选项帮助我们完成数据的迁移和同步。比如，下面两个潜在的需求：业务数据存放在关系数据库中，如果数据量达到一定规模后需要对其进行分析或同统计，单纯使用关系数据库可能会成为瓶颈，这时可以将数据从业务数据库数据导入（import）到Hadoo

2014-05-08 14:24:09 40803

原创 sqoop导出hive数据到mysql错误ava.util.NoSuchElementException解决办法

sqoop错误日志：14/05/08 12:25:40 INFO mapred.JobClient: Task Id : attempt_201405071437_0013_m_000000_0, Status : FAILEDjava.io.IOException: Can't export data, please check task tracker logsat org.apa

2014-05-08 12:39:07 8718