- 博客(7)
- 问答 (1)
- 收藏
- 关注
RSS订阅原创 导出hive表数据的5种方法
下面介绍一下hive 导出的几种方式本地文件直接导出insert overwrite local directory '/data/hive/export/student_info' select * from default.student 修改分隔符和换行符insert overwrite local directory '/data/hive/export/student_...
2018-12-27 22:53:23
9671
1
原创 导入数据进入hive的6种方式
下面介绍几种常用的导入数据到hive的方式加载本地文件到hive load data local inpath '/data/hive/student_info.txt' into table default.student_info 加载hdfs文件到hive中 load data inpath '/data/hive/student_info.txt' into...
2018-12-27 22:30:46
5031
转载 Hive中的join操作
在做sql 操作的时候多表join 在所难免，下面主要介绍一下hive 中做joinLEFT JOIN，RIGHT JOIN， FULL OUTER JOIN ,inner join, left semi join准备数据1,a2,b3,c4,d7,y8,u2,bb3,cc7,yy9,pp建表：create table a(id int,name string...
2018-12-23 12:55:22
3019
转载 hive中 常用操作
本篇文章主要介绍一下hive的常用sql 操作添加分区一次添加一个分区 ALTER TABLE table_name ADD PARTITION (partCol = 'value1') location 'loc1'; //示例 ALTER TABLE table_name ADD IF NOT EXISTS PARTITION (dt='20130101') LOCAT...
2018-12-23 10:33:26
3304
原创 hive 中创建表的三种方式
官网地址：https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DDL通常我们所使用的创建hive表有三种方式1.create table首先我们找到官网对创建表的描述如下：’[]’ 表示可选，’|’ 表示几选一CREATE [TEMPORARY] [EXTERNAL] TABLE [IF NOT EXISTS] ...
2018-12-23 09:17:06
15197
转载 Apache Spark 2.4 内置图像数据源介绍
随着图像分类（image classification）和对象检测（object detection）的深度学习框架的最新进展，开发者对 Apache Spark 中标准图像处理的需求变得越来越大。图像处理和预处理有其特定的挑战 - 比如，图像有不同的格式（例如，jpeg，png等），大小和颜色，并且没有简单的方法来测试正确性。图像数据源通过给我们提供可以编码的标准表示，并通过特定图像的细节进行...
2018-12-18 21:14:25
3381
转载 从 paxos 到 zookeeper（五）：paxos算法
1.概述paxos 算法 是莱斯利,兰伯特 于1990 年提出的一种基于消息传递且具有高度容错性一致性算法，是目前公认的解决分布式一致性最有效的算法之一。在常见的分布式系统中总会发生类似于宕机，网络异常等等问题，paxos 算法就是要在分布式系统中发生上述问题的时候，快速且正确在集群内部对某个数据达成一致。2.详解在paxos算法中，分为4种角色：Proposer ：提议者Accep...
2018-12-16 16:52:53
2749
空空如也
datagrid 行添加问题，行数据的自动分页
2016-12-26
TA创建的收藏夹 TA关注的收藏夹
TA关注的人