自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(15)
  • 资源 (15)
  • 收藏
  • 关注

原创 动态分区表--严格模式处理-导出数据到本地或HDFS

 动态分区表--严格模式处理======导出hive中的到数据到本地或HDFS hive (default)> drop database hive1 cascade;OKTime taken: 2.025 secondshive (default)> create database hive1;OKTime taken: 0.188 seconds 创...

2018-06-30 15:49:38 917

原创 Hive --beeline客户端 --常用操作命令 --一些小知识点

HIVE BeenLine客户端-常用命令 支持多链接启动hiveserver2服务。接受多个客户端连接请求使得client通过JDBC连接操纵hive数据仓库 -------------------------------------------[hadoop@master data]$ hive --service hiveserver2 &首先开启     hive --serv...

2018-06-30 12:04:43 11518

原创 HIVE中-托管表-外部表-分区表

内部表和外部表的区别执行删除表命令操作时,对于内部表,会删除元数据和存储的数据,而对于外部表只会删除元数据库里的元数据信息,而不会删除存储的数据。这样可以防止多个部门同时使用一个表时,一个部门删除数据文件导致其他部门不能使用的情况。方便共享数据。 内部表默认存储在数据仓库中,而外部表一般通过location自己指定目录,便于存放在仓库外。Hive分区表为什么有分区表? 如果把一年或者...

2018-06-30 12:03:08 1182

原创 Hive客户端JDBC连接操作

创建maven工程pom.xml------------------------------<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"  xsi:schemaLocation="http://maven.apache.org/P...

2018-06-29 14:40:55 10341 3

原创 HIVE的常用操作-建库和表-插入数据

hive的安装(远程模式)    点击打开链接https://blog.csdn.net/qq_41028958/article/details/80820530使用hive-----------------------启动hadoop启动hive创建数据库:create database myhive;查看数据库:hive (default)> show databases;OKdat...

2018-06-29 11:19:40 59250 9

原创 CENTOS 7 静态网络的配置(能连接外网)

下面进行CENTOS 7 静态网络的配置(能连接外网):网络模式为NAT模式下面把IP改为静态IP在root用户进行如下操作:[root@localhost hadoop]# cd /etc/sysconfig/network-scripts/[root@localhost network-scripts]# pwd/etc/sysconfig/network-scripts[root@lo...

2018-06-27 23:00:26 2134

原创 flume-1.6.0 的安装

下载apache-flume-1.6.0-bin.tar.gz 点击打开链接

2018-06-27 22:30:10 1666

原创 pig-0.16的安装

pig 的下载地址     https://mirrors.tuna.tsinghua.edu.cn/apache/pig/上传pig-0.16到/usr/local/app解压:[hadoop@master local]$ tar -zxvf ./app/pig-0.16.0.tar.gz  -C ./soft/配置环境变量:[hadoop@master soft]$ vi ~/.bashrce...

2018-06-27 10:19:12 196

原创 sqoop-1.4.6安装配置

前沿centos 7jdk1.8.0hadoop-2.7.3hbase-1.3.1hive-2.1.1zookeeper-3.4.9Mysql-5...Sqoop-1.4.6解压[hadoop@master local]$ tar -zxvf ./app/sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz -C ./soft/进入/usr/local/soft/重...

2018-06-27 09:32:47 610

原创 hbase-1.3.1完全分布式搭建(基于hadoop-2.7.3 zookeeper-3.4.9)

hadoop-2.7.3完全分布式搭建:https://blog.csdn.net/qq_41028958/article/details/80817337zookeeper-3.4.9集群搭建:https://blog.csdn.net/qq_41028958/article/details/80821453hbase-1.3.1完全分布式搭建1.上传hbase安装包配置环境:[hadoop@m...

2018-06-26 22:29:54 318

原创 zookeeper-3.4.9集群的搭建(基于hadoop-2.7.3)

1.上传zk安装包到/usr/local/app zookeeper-3.4.9.tar.gz配置环境变量:[hadoop@master app]$ vi ~/.bashrcexport ZOOKEEPER_HOME=/usr/local/soft/zookeeper-3.4.9export PATH=.:$HADOOP_HOME/bin:$ZOOKEEPER_HOME/bin:$JAVA_HO...

2018-06-26 22:11:49 324

原创 centos 7 安装 apache-hive-2.1.1

Mysql的安装:https://blog.csdn.net/qq_41028958/article/details/80820397HIVE的安装步奏:解压[hadoop@master app]$ tar -zxvf apache-hive-2.1.1-bin.tar.gz -C /usr/local/soft[hadoop@master soft]$ pwd/usr/local/soft配...

2018-06-26 21:32:38 1206

原创 centos 7中 Mysql的在线安装

一:正确的安装mysql5姿势是要先安装带有可用的mysql5系列社区版资源的rpm包[root@slave1 ~]# rpm -Uvh http://dev.mysql.com/get/mysql-community-release-el7-5.noarch.rpm[root@slave1 ~]# yum repolist enabled | grep "mysql.*-community.*"...

2018-06-26 20:28:53 899

原创 Hue安装部署(Centos 7)

一:hue介绍:http://blog.csdn.net/liangyihuai/article/details/54137163***********************搭建好hadoop-2.7.3完全分布式集群后进行hue-3.9.0-cdh5.5.4的安装***************************二:HUE的安装部署:1,在root用户下用yum安装所依赖的系统包[hado...

2018-06-26 19:08:45 4857 1

原创 hadoop-2.7.3集群的搭建

masterslave1slave2

2018-06-26 17:49:43 379

scala.rar学习笔记和心得

Scala 是一门多范式(multi-paradigm)的编程语言,设计初衷是要集成面向对象编程和函数式编程的各种特性。 Scala 运行在Java虚拟机上,并兼容现有的Java程序。 Scala 源代码被编译成Java字节码,所以它可以运行于JVM之上,并可以调用现有的Java类库。

2020-06-13

javase.rar

Java是一门编程语言,是用来编写软件的。QQ、迅雷、淘宝、京东等等这些常用软件都可以用Java来编写。ava的开发环境需要安装,包括JDK(Java Development Kit)和JRE(Java Runtime Envionment)

2020-06-07

Mysql详细学习笔记.rar

该资源比较适合学习Sql语句的人员,该资源比较详细,笔记做的比较好,适合大部分人使用,便于掌握学习,是个很好的学习资源,得到了很多人的认可

2020-06-06

dianyingshujuji.csv

该数据是关于电影的·一些数据,可以对该数据进行分析,数据比较完整,很适合做一些影评的分析,是非常好的数据集,希望能够帮助到大家。在数据这方面可以通过一些资源进行获取,大家也可以根据自己的情况,进行参考。

2020-04-23

scala.rar基础知识,笔记很好的详细

Scala学习资源Scala编程语言抓住了很多开发者的眼球。如果你粗略浏览Scala的网站,你会觉得Scala是一种纯粹的面向对象编程语言,而又无缝地结合了命令式编程和函数式编程风格。Christopher Diggins认为: 不太久之前编程语言还可以毫无疑意地归类成“命令式”或者“函数式”或者“面向对象”。Scala代表了一个新的语言品种,它抹平了这些人为划分的界限。

2020-02-28

CDH安装文档详细基础

CDH集群安装的详细步骤,带截图比较详细,适合初学者进行学习

2019-08-12

hadoop源码编译

WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable 需要进行hadoop源码的编译

2018-12-15

Mysql高级文档超详细

Mysql高级深入,文档超级详细,解释的详细 相信通过这次学习 你收获的肯定特别多

2018-12-14

flink详细教学

flink比较全面的教学视频 基础和理论实践相结合 比较适合初学者进行学习

2018-12-14

MySQL性能管理及架构设计

只列出部分章节详情请看里面的内容,第8章 数据库的分库分表 第6章 数据库索引优化

2018-12-14

比较全面数据仓库开发视频

数据仓库开发视频,比较全面,适合初学者进行学习,该套视频看过感觉挺好的掌握了很多自己以前缺少的知识

2018-12-14

spark深度解析

能够帮助学习spark的更加全面了解spark的底层原理,希望通过学习这个资料能够帮助大家快速的掌握和上手

2018-12-12

centos7快速上手Linux 玩转典型应用

此文档是关于centos7快速上手的相关操作文档,和一些服务器相关的搭建

2018-12-11

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除