2014年06月_colinmok

12月 11月 09月 08月 07月 06月 03月

原创学习总结十五：分布式实时计算系统storm简介

在大数据处理上，大家可能对hadoop中的mapredace

2014-06-29 18:39:02 741

转载学习总结十二：Hadoop学习之SecondaryNameNode

在启动Hadoop时，NameNode节点上会默认启动一个SecondaryNameNode进程，使用JSP命令可以查看到。SecondaryNameNode光从字面上理解，很容易让人认为是NameNode的热备进程。其实不是，SecondaryNameNode是HDFS架构中的一个组成部分。它并不是元数据节点出现问题时的备用节点，它和元数据节点负责不同的事情。1、Secondar

2014-06-29 15:16:32 934

转载学习总结一：hdfs fs常用命令使用

-help [cmd] //显示命令的帮助信息-ls(r) //显示当前目录下所有文件-du(s) //显示目录中所有文件大小-count[-q] //显示目录中文件数量-mv //移动多个文件到目标目录-cp //复制多个文件到目标目录-rm(r) //删除文件(夹)-put //本地文件复制到hdfs-copyFromLocal //同put

2014-06-29 14:47:36 2076

原创 linux常用命令

关闭防火墙：service iptables stopchkconfig iptables off

2014-06-29 14:42:21 377

原创学习总结十三：Hadoop核心项目

HDFS: Hadoop Distributed File System 分布式文件系统 MapReduce：并行计算框架

2014-06-29 14:29:36 531

原创 spark开源框架

Spark官方地址：http://spark.apache.org/examples.html

2014-06-29 14:20:35 971

原创学习总结二十：坑爹呀，hadoop2源码编译

做了几次，终于把源码编译好了。原来是内存分配小了。安装步聚整理：1.安装CentOS在VMWare虚拟机，安装CentOS6.5版本，内存分配2GB，磁盘空间分配20GB。内存太小，会比较慢；磁盘太小，编译时可能会出现空间不足的情况。注意一定要保持linux联网状态。（前面三次按装，两次是因为联网问题，安装失败，最后一次按装失败是因为内存分配过小）centos6.5下载

2014-06-29 13:40:18 513

原创 H2数据库导出导入数据方法

1.导出数据：通过自带的CSVWRITE方法导出为csv格式文件。执行命令：CALL CSVWRITE('d:/test.csv', 'SELECT * FROM t');2.导入数据：根据csv文件创建h2数据表。执行命令： //csv文件数据创建test表 CREATE TABLE TEST AS SELECT * FROM CSVREAD('d:/t

2014-06-29 13:36:38 12912 1

原创 linux系统vi编辑文件时快捷键

vi 文件名进入命令行模式按 a i 或 o进行编辑模式 (注意：a和i都是当前光标位插入，o是重新开一行)按dd 删除整行内容按yy 复制当前行内容按p 粘贴刚才yy的那行内容按 esc 键退出编辑模式shift + ":" 进入保存模式，再按wq保存退出，单按q不保存退出

2014-06-29 13:35:41 682

原创 Linux三种软件安装方式

Linux下软件安装主要有三种方式：一种是源码安装，需要用户自己手动编译另一种是RPM包（RedHat Linux Packet Manager）,通过RPM命令就可以实现安装。还有一种为*.bin文件，安装方法与Windows下的安装过程类似，这里不做介绍，本文主要介绍源码安装与RPM包的安装。一、源码包安装1、*.src.rpm形式的源代码软件包用法：安装：

2014-06-29 13:32:48 1712

linxu系统php环境配置

centos6.5中配置php5.2.14+libiconv-1.14.tar.gz+ZendOptimizer-3.3.3-linux-glibc23-x86_64.tar.gz

2015-07-09

win7系统下，Eclipse4.2的中文字体偏小，看着好累。下面这个方法可以彻底解决： 1.下载YaHei.Consolas.1.12.ttf字体，放到系统盘C:\Windows\Fonts下即可。 2.重新启动Eclipse4.2按如下设置 Window-->>Preferences-->>General-->>Appearance-->>Colors and Fonts 选择右框的Basic-->>Aa Text Font 点Edit按钮选中字体YaHei.Consolas.1.12点确定即可。

2013-04-27