2016年04月_木小草

08月 07月 06月 05月 04月 03月

原创 hadoop中mapreduce程序的几种提交运行模式

本地运行模式在windows的eclipse里买能直接运行main方法，就会将job提交给本地执行其localjobrunner执行输入输出数据可以放在本度路径下（c：/file/src）输入输出数据可以也放在hdfs中（hdfs：//muxiaocao：9000/file/src）在linux打eclise里面直接运行main方法，但是不要添加yarn相关的配置，也会提交

2016-04-04 00:50:27 3867 1

原创 Hadoop学习之RPC

前几天在学习Hadoop的时候，学到了他的RPC机制，即RPC（Remote Procedure Call Protocol）——远程过程调用协议。以便日后的学习，在此记录一下学习心得。在我看来，RPC的本质其实和JMS消息队列，WebService一样。都是两个主机，两个线程之间通信问题，不一样的就是通信的内容不同而已。 RPC是通过动态代理，利用socket通信，实现方法体的异地调用。而J

2016-04-03 20:44:51 1004

转载 Linux常用命令大全

Linux简介及Ubuntu安装常见指令系统管理命令打包压缩相关命令关机/重启机器 Linux管道 Linux软件包管理 vim使用用户及用户组管理文件权限管理大牛笔记-www.weixuehao.com 来自：http://www.weixuehao.com/archives/25 Linux简介及Ubuntu安装 Linux，免费开源，多用户多任务系统

2016-04-03 19:30:31 403

转载 Linux服务之SSH

一、ssh（secure shell）安装 view sourceprint? 01.[root@localhost logs]# yum install openssh 02. 03.……………………………… 04. 05.Downloading Packages: 06.(1/4): openssh-5.3p1-84.1.el6.x86 | 236 kB

2016-04-02 15:28:21 1382 1

原创超详细的Hadoop伪分布式搭建教程

准备Linux环境 1.0 点击VMware快捷方式，右键打开文件所在位置 -> 双击vmnetcfg.exe -> VMnet1 host-only ->修改subnet ip 设置网段：192.168.1.0 子网掩码：255.255.255.0 -> apply -> ok 回到windows –> 打开网络和共享中心 -> 更改适配器设置 -> 右键VMnet1 -> 属性 -

2016-04-02 00:34:16 847