Hadoop学习笔记
xiachong112228
这个作者很懒,什么都没留下…
展开
-
Hadoop集群安装遇到的问题之一
1. ubuntu12上安装jdk1.7.0_04的问题ubuntu12上默认存在的是openjdk,所以传统的apt-get install sun-jdk6命令无法执行,必须手动安装jdk。在oracle官方网站上下载的linux版本jdk只有rpm与tar.gz两种格式。在安装过程如下:a) 解压jdk(以tar.gz为例):tar –xvzf jdk1.7.tar.gzb) ...原创 2012-06-05 13:50:03 · 134 阅读 · 0 评论 -
hadoop集群环境下主机与从机之间使用同一账户的原因
namenode节点和datanode节点最好使用统一的用户名,并且安装目录最好一致。因为在namenode节点通过ssh控制datanode节点时,默认按照namenode节点的配置环境在datanode节点的同样目录下找寻配置文件,若安装目录或者用户名不同,则出现文件不存在或者无法找到的错误。...原创 2012-06-06 17:30:43 · 299 阅读 · 0 评论 -
Hadoop能做什么
最近开始漫无目的的研究Hadoop,在总结一下它能做什么之前,想到一句业内的名言:“如果你不能打败你的对手,那就把他的技术开源吧。”Hadoop的核心是一个分布式计算和存储平台,从其核心的HDFS和Map/Reduce来说,它可以做下面的事情:1.日志分析:这是当前用的最多的一个用途,百度就是用Hadoop实现的其日志分析功能。2.海量数据的查询:从海量数据中找出你需要的那个。...原创 2012-06-25 14:20:56 · 210 阅读 · 0 评论 -
Hives基础知识
内容见附件原创 2012-06-26 09:57:59 · 89 阅读 · 0 评论 -
从现在开始专心
从今天开始专心钻研技术。原创 2012-07-02 16:50:35 · 83 阅读 · 0 评论 -
Ubuntu环境变量
添加环境变量:方法一:$ vi ~/.bashrc在最后一行添加PATH=$PATH:/my_new_path:$source ~/.bashrc方法二:注意:修改环境变量PATH。具体:修改/etc/bash.bashrc文件(所有用户都可用)$sudo vim /etc/bash.bashrc在文件末尾添加:export PATH=$PATH...原创 2012-11-19 22:34:38 · 126 阅读 · 0 评论