- 博客(3)
- 收藏
- 关注
原创 hadoop mapreduce
hadoop 的maprduce 是hadoop核心基础主键之一,主要处理大批量的数据。主要分为2部分,map与reduce,.map在hadoop的运行体系中承当录入数据的作用,传入的数据,通过用户的私人定制,成相应的数据通过job输出给reduce进行处理。例如进行排序等。
2016-07-02 10:31:51 212
原创 hadoop的版本变迁
hadoop的起源是lucen之父为了处理lucen的问题,基于谷歌发表的几篇文章衍生出来的,刚开始hadoop的核心只有hdfs ,mapreduce.这边是hadoop的最初版本。 随着hdfs的流行,出现了新的问题,hdfs不支持append,从这个问题开始,hadoop变衍生除了分之,解决这个问题,一步步形成一个成熟的方案。同样的,另一些问题也解决掉了,如安全性的问题。后面随着处理had
2016-06-24 23:15:03 852
原创 linux常用操作命令
1.设置主机名称:hostname 主机名称,这种方式设置的名称只在当前操作有效,意味着当linux重新启动的时候,主机名称任然未发生变化。如果要使改变生效的话,需要修改相应的文件。vi /etc/sysconfig/network hostname 新名称 esc : wq 保存退出 2。关于配置linux一个ip对应一个名称。vi /etc/hosts 192.168.1.16 com
2016-06-24 09:46:15 177
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人