hadoop
wsxlgg
永远不要满足于现状,只有走得越远,才能看得越多。
展开
-
hadoop参考链接
http://hadooped.blogspot.jp/http://dennyglee.com/2013/04/26/optimizing-joins-running-on-hdinsight-hive-on-azure-at-gfs/http://blog.hesey.net/2012/04/hive-tips.htmlhttp://www.alidata.org/archives原创 2015-05-28 10:21:14 · 483 阅读 · 0 评论 -
Hadoop自测题及参考答案
单选题 1、与其他几项不同的是 A. Mesos B. Mongodb C. Corona D. Borg E. YARN注:其他几项都是资源统一管理系统或者资源统一调度系统,而 Mongodb一种非关系型数据库。2、[java基础] 以下不属于线程安全的数据结构是 A. HashMap B. HashTable C. CopyOnWriteArrayL转载 2015-06-18 18:20:49 · 14082 阅读 · 0 评论 -
hadoop2.2.0集群搭建
hadoop2.0已经发布了稳定版本了,增加了很多特性,比如HDFS HA、YARN等。注意:apache提供的hadoop-2.2.0的安装包是在32位操作系统编译的,因为hadoop依赖一些C++的本地库,所以如果在64位的操作上安装hadoop-2.2.0就需要重新在64操作系统上重新编译前期准备就不详细说了1.修改Linux主机名2.修改IP3.修改转载 2015-06-26 19:40:51 · 566 阅读 · 0 评论 -
Hadoop常见重要命令行操作及命令作用
关于Hadoop[root@master ~]# hadoop --helpUsage: hadoop [--config confdir] COMMAND where COMMAND is one of: fs run a generic filesystem user client version转载 2015-06-30 20:02:28 · 1538 阅读 · 0 评论 -
Hbase集群扩展
当hbase集群节点不够用时,我们需要新增节点来对集群进行扩展,hbase集群的扩展是很简单的,步骤如下:一、准备一台新机器作为扩展节点,这里是作为slaves15,该机子要先与master机之间配置好ssh,并配置好hadoop,扩展到hbase所在的hadoop集群上(ssh配置这里不介绍了,hadoop集群扩展,见我的博客《hadoop集群扩展》)。二、修改master机器上转载 2015-07-20 10:22:31 · 610 阅读 · 0 评论 -
Hadoop-0.22.0分布式集群配置
Hadoop集群的安装和配置,主要分为两个部分:一部分是主机环境配置,主要是指Hadoop集群所依赖的操作系统及其相关软件的安装配置,包括操作系统安装、JDK安装配置、主机规划与IP地址映射配置、无密码认证会话配置;另一部分是Hadoop基本配置,主要是指Hadoop集群的各种基本组件的配置,包括HDFS的配置、MapReduce配置。下面根据上面总结的两个部分进行详细配置实践。在转载 2016-08-23 13:04:04 · 368 阅读 · 0 评论