- 博客(15)
- 资源 (15)
- 收藏
- 关注
原创 动态分区表--严格模式处理-导出数据到本地或HDFS
动态分区表--严格模式处理======导出hive中的到数据到本地或HDFS hive (default)> drop database hive1 cascade;OKTime taken: 2.025 secondshive (default)> create database hive1;OKTime taken: 0.188 seconds 创...
2018-06-30 15:49:38 917
原创 Hive --beeline客户端 --常用操作命令 --一些小知识点
HIVE BeenLine客户端-常用命令 支持多链接启动hiveserver2服务。接受多个客户端连接请求使得client通过JDBC连接操纵hive数据仓库 -------------------------------------------[hadoop@master data]$ hive --service hiveserver2 &首先开启 hive --serv...
2018-06-30 12:04:43 11518
原创 HIVE中-托管表-外部表-分区表
内部表和外部表的区别执行删除表命令操作时,对于内部表,会删除元数据和存储的数据,而对于外部表只会删除元数据库里的元数据信息,而不会删除存储的数据。这样可以防止多个部门同时使用一个表时,一个部门删除数据文件导致其他部门不能使用的情况。方便共享数据。 内部表默认存储在数据仓库中,而外部表一般通过location自己指定目录,便于存放在仓库外。Hive分区表为什么有分区表? 如果把一年或者...
2018-06-30 12:03:08 1182
原创 Hive客户端JDBC连接操作
创建maven工程pom.xml------------------------------<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.apache.org/P...
2018-06-29 14:40:55 10341 3
原创 HIVE的常用操作-建库和表-插入数据
hive的安装(远程模式) 点击打开链接https://blog.csdn.net/qq_41028958/article/details/80820530使用hive-----------------------启动hadoop启动hive创建数据库:create database myhive;查看数据库:hive (default)> show databases;OKdat...
2018-06-29 11:19:40 59250 9
原创 CENTOS 7 静态网络的配置(能连接外网)
下面进行CENTOS 7 静态网络的配置(能连接外网):网络模式为NAT模式下面把IP改为静态IP在root用户进行如下操作:[root@localhost hadoop]# cd /etc/sysconfig/network-scripts/[root@localhost network-scripts]# pwd/etc/sysconfig/network-scripts[root@lo...
2018-06-27 23:00:26 2134
原创 pig-0.16的安装
pig 的下载地址 https://mirrors.tuna.tsinghua.edu.cn/apache/pig/上传pig-0.16到/usr/local/app解压:[hadoop@master local]$ tar -zxvf ./app/pig-0.16.0.tar.gz -C ./soft/配置环境变量:[hadoop@master soft]$ vi ~/.bashrce...
2018-06-27 10:19:12 196
原创 sqoop-1.4.6安装配置
前沿centos 7jdk1.8.0hadoop-2.7.3hbase-1.3.1hive-2.1.1zookeeper-3.4.9Mysql-5...Sqoop-1.4.6解压[hadoop@master local]$ tar -zxvf ./app/sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz -C ./soft/进入/usr/local/soft/重...
2018-06-27 09:32:47 610
原创 hbase-1.3.1完全分布式搭建(基于hadoop-2.7.3 zookeeper-3.4.9)
hadoop-2.7.3完全分布式搭建:https://blog.csdn.net/qq_41028958/article/details/80817337zookeeper-3.4.9集群搭建:https://blog.csdn.net/qq_41028958/article/details/80821453hbase-1.3.1完全分布式搭建1.上传hbase安装包配置环境:[hadoop@m...
2018-06-26 22:29:54 318
原创 zookeeper-3.4.9集群的搭建(基于hadoop-2.7.3)
1.上传zk安装包到/usr/local/app zookeeper-3.4.9.tar.gz配置环境变量:[hadoop@master app]$ vi ~/.bashrcexport ZOOKEEPER_HOME=/usr/local/soft/zookeeper-3.4.9export PATH=.:$HADOOP_HOME/bin:$ZOOKEEPER_HOME/bin:$JAVA_HO...
2018-06-26 22:11:49 324
原创 centos 7 安装 apache-hive-2.1.1
Mysql的安装:https://blog.csdn.net/qq_41028958/article/details/80820397HIVE的安装步奏:解压[hadoop@master app]$ tar -zxvf apache-hive-2.1.1-bin.tar.gz -C /usr/local/soft[hadoop@master soft]$ pwd/usr/local/soft配...
2018-06-26 21:32:38 1206
原创 centos 7中 Mysql的在线安装
一:正确的安装mysql5姿势是要先安装带有可用的mysql5系列社区版资源的rpm包[root@slave1 ~]# rpm -Uvh http://dev.mysql.com/get/mysql-community-release-el7-5.noarch.rpm[root@slave1 ~]# yum repolist enabled | grep "mysql.*-community.*"...
2018-06-26 20:28:53 899
原创 Hue安装部署(Centos 7)
一:hue介绍:http://blog.csdn.net/liangyihuai/article/details/54137163***********************搭建好hadoop-2.7.3完全分布式集群后进行hue-3.9.0-cdh5.5.4的安装***************************二:HUE的安装部署:1,在root用户下用yum安装所依赖的系统包[hado...
2018-06-26 19:08:45 4857 1
scala.rar学习笔记和心得
2020-06-13
javase.rar
2020-06-07
dianyingshujuji.csv
2020-04-23
scala.rar基础知识,笔记很好的详细
2020-02-28
hadoop源码编译
2018-12-15
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人