hadoop
小船长的炒菜猫
不积跬步无以致千里,不积小流无以成江海
展开
-
hive--Found class jline.Terminal, but interface was expected
在启动hive时报错。环境hadoop-2.6.5 和 hive-1.2.0[ERROR] Terminal initialization failed; falling back to unsupportedjava.lang.IncompatibleClassChangeError: Found class jline.Terminal, but interface was原创 2017-02-14 10:23:26 · 577 阅读 · 0 评论 -
Mac环境下安装Hadoop伪分布模式
Hadoop是一个由Apache基金会所开发的分布式系统基础架构。这里讲述在Mac上安装Hadoop伪分布模式的过程。环境:Mac OS X 10.11 + Hadoop-2.6.51 下载官网下载Hadoop(下载链接),选择binary文件下载,source源码是需要自己编译后使用。2 安装(2.6.5版本)2.1 hdfs-site.xml将下载的文件解压,进入/etc/hadoop/文件夹,原创 2017-04-11 15:16:38 · 1268 阅读 · 0 评论 -
Mac下Hive安装和使用
1.Hive安装1.1下载官网下载地址apache.fayea.com/hive/,目前最新版为1.2.2,选择 apache-hive-1.2.2-bin.tar.gz文件下载。1.2 配置hive-env.sh解压文件至本地文件夹,进入/conf文件夹,编辑hive-env.sh# Set HADOOP_HOME to point to a specific hadoop install di原创 2017-04-11 15:28:10 · 5102 阅读 · 2 评论 -
Mac下Hbase伪分布安装和使用
Hbase是一个分布式的、面向列的开源数据库,是构建在HDFS分布式文件系统上的分布式存储系统。1.下载安装官网下载地址apache.fayea.com/hbase/,这里选择1.1.9版本hbase-1.1.9-bin.tar.gz。1.1 abase-site.xml解压文件到文件夹,进入/conf文件夹,打开hbase-site.xml,加入以下配置:<configuration><prop原创 2017-04-11 15:30:57 · 3293 阅读 · 0 评论 -
Hive错误笔记
1.启动Hive时出现安全模式的问题Exception in thread "main" java.lang.RuntimeException: org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.hdfs.server.namenode.SafeModeException): Cannot create directory /Users/原创 2017-04-11 15:40:34 · 1179 阅读 · 0 评论 -
使用Phoenix连接Hbase
想要使用SQL语句对Hbase进行查询,需要使用Apache的开源框架Phoenix。 演示环境:Phoenix 4.9.0-Hbase-1.1 + Hbase 1.1.91 本地安装Phoenix1.1 下载Phoenix从Apache下载Phoenix(下载链接),从4.8.0到4.10.0各版本都有,本地安装的Hbase版本为1.1.9,所以选择对应Hbase是1.1版本的下载。这里我下载的原创 2017-04-11 15:35:19 · 22746 阅读 · 5 评论 -
Mac下Sqoop安装与使用
使用Phoenix连接Hbase想要使用SQL语句对Hbase进行查询,需要使用Apache的开源框架Phoenix。演示环境:Phoenix 4.9.0-Hbase-1.1 + Hbase 1.1.91 本地安装Phoenix1.1 下载Phoenix从Apache下载Phoenix(下载链接),从4.8.0到4.10.0各版本都有,本地安装的Hbase版本为1.1.9,所以选择对应Hbase是1原创 2017-11-29 12:51:33 · 1822 阅读 · 0 评论