- 博客(7)
- 收藏
- 关注
原创 初学pig的笔记
数据分析引擎:Pig---------------------------------一、什么是Pig?安装和配置 1、最早由Yahoo开发,后来给Apache 2、支持语句PigLatin语句,类似SQL 3、翻译器:PigLatin语句 ----> MapReduce Spark(从0.17开始支持) 4、安装和配置 t...
2018-05-08 21:51:09
218
原创 User: root is not allowed to impersonate anonymous报错
jdbc连接hive时出现的hivserer2连接报错java.sql.SQLException: Could not open client transport with JDBC Uri: jdbc:hive2://192.168.137.11:10000/default: Failed to open new session:java.lang.RuntimeException: org....
2018-05-08 20:03:55
3595
原创 初步学习hive的笔记
数据分析引擎:Hive属于hadoop,支持sql一.什么是Hive? 1、Hive是一个翻译器,SQL ---> Hive引擎 ---> MR程序 2、Hive是构建在HDFS上的一个数据仓库(Data Warehouse) Hive HDFS 表 目录 分区 目录 数据 文件 桶 文件 ...
2018-05-07 22:24:45
459
转载 Hive与关系型数据库的比较(转载)
使用hive的ctl(命令行接口)时,你会感觉它很像是在操作关系型数据库,但是实际上,hive和关系型数据库有很大的不同。 1)hive和关系型数据库存储文件的系统不同。 hive使用hdfs(hadoop的分布式文件系统),关系型数据库则是服务器本地的文件系统; 2)hive使用的计算模型是mapreduce,而关系型数据库则是自己设计的计算模型。 ...
2018-05-07 22:14:16
1264
原创 Hbase的安装配置
搭建HBase环境 tar -zxvf hbase-1.3.1-bin.tar.gz -C ~/training/ 设置环境变量 vi ~/.bash_profile HBASE_HOME=/root/training/hbase-1.3.1 export HBASE_HOME PATH=$HBASE_HOME/bin:$PATH export PATH source ~/.ba...
2018-05-03 14:53:44
163
原创 在redhat7中安装hadoop
1、安装Linux、JDK、关闭防火墙、配置主机名 解压:tar -zxvf hadoop-2.7.3.tar.gz -C ~/training/ 设置Hadoop的环境变量: vi ~/.bash_profile HADOOP_HOME=/root/training/hadoop-2.7.3 export HADOOP_HOME PATH=$HADOOP_HOME/bin:$HA...
2018-04-28 21:48:39
1684
原创 大数据学习体系
明确几个问题:1、学什么?怎么学? ------> 思想、原理、体系结构(非常重要): 画图2、搭建环境:一定仔细3、写程序:Hadoop、Storm ---> Java程序 Spark ---> Scala、Java目的:1、学习内容 2、名词(很多) ======================================...
2018-04-26 15:15:06
1733
2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人