Excel与hive、hbase的交互[转自 AIMP平台wiki]

最新推荐文章于 2024-06-28 16:11:42 发布

AILK--配置管理组

最新推荐文章于 2024-06-28 16:11:42 发布

阅读量1.3k

点赞数

某poc测试有个大数据平台odbc连通性测试用例，可以采用一些商用odbc驱动，比如mapr、simba等。以simba win32位odbc为例，介绍如何在excel中访问hive

1）安装odbc驱动，下载地址：
wget http://www.simba.com/wp-content/uploads/2014/05/SimbaHiveODBC_Windows-1.4.5.zip
会向注册邮件地址发送一个月试用license

2）配置hive主机ip和端口

3）打开excel，数据中选择ms query数据源

选择刚建立的odbc数据源，可以直接用ms query写自定义sql

返回数据到excel自动生成数据表格

Updated by 杨启虎 , 更新于 6 天之前

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

AILK--配置管理组

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

通过hive将excel文件_hive 之将excel数据导入hive中 : excel 转 txt

weixin_39849254的博客

12-31

1329

一、需求：1、客户每月上传固定格式的excel文件到指定目录。每月上传的文件名只有结尾月份不同，如： 10月文件名： zhongdiangedan202010.xlsx ， 11月文件名：zhongdiangedan202011.xlsx2、将上传的excel文件导入hive中，在做进一步数据分析。二、思路：1、通过python的pandas模块将excel文件转换为txt文件；2、编写sh...

excel连接hive大数据

weixin_43645727的博客

10-23

662

驱动：我用阿里云盘分享了「excel连接hive驱动」，你可以不限速下载???? 复制这段内容打开「阿里云盘」App 即可获取链接：https://www.aliyundrive.com/s/j43wHjNuvsu Excel连接大数据: 1,windows安装驱动 2,linux 的hive参上 3,windows打开odbc数据库，连接(设置免密登录，输入ip) 4，excel加载odbc 输入用户名（）密码（） ...

参与评论您还未登录，请先登录后发表或查看评论

hive解析excel

最新发布

weixin_32602879的博客

06-28

195

关于Execel 2007 连接到 hive odbc

weixin_30398227的博客

02-10

144

官方给出的都是 2010 或2012版的连接方案，看起来与2007有些不同，但我相信这些功能都是通用的。下载 odbc hive 驱动。http://hortonworks.com/products/hdp-windows/#add_ons 安装驱动，对于32位的应用程序使用32位的驱动，到于64位的使用64位的驱动，当然方便起见都装上了。控制面板\所有控制面板项...

EXCEL数据导入HIVE

Whisperya6的博客

06-17

1022

四、将test.txt文件上传至虚拟机的Linux环境中，同时在hive里新建Test数据表（已经建库），输入建表语句的时候务必注意对应字段的类型必须相同。本文将论述如何将Windows本地的excel表数据，导入到虚拟机Linux系统中的Hadoop生态中的Hive数据仓库中。至此，完成excel表数据传入Hive的所有操作。二、将清洗后的excel表的数据另存为txt格式，也可以在hive中输入HQL语句查看。

上传Excel到HBase数据库（POI、poi-ooxml）

weixin_48435461的博客

01-05

1486

调用poi操作excel，再使用HBase的API将数据上传到HBase数据库

详解hbase与hive数据同步

08-29

详解HBase与Hive数据同步 HBase与Hive数据同步是大数据处理中常见的一种数据集成方式。HBase是一种NoSQL数据库，适合存储大量半结构化和非结构化数据，而Hive是基于Hadoop的数据仓库工具，用于数据分析和处理。两者...

HBASE与HIVE转换

q2842360795的博客

11-01

1350

hive-to-hbase 在hive中建表 create table if not exists employee ( uid int, uname string, age int, sex string, province string ) stored by 'org.apache.hadoop.hive.hbase.HBaseStorageHandler' with serdeproperties( "hbase.columns.mapping"=":key,base_info:name,base_

Hive整合Hbase

qq_51691017的博客

11-04

640

Hive-2.3.3Hive与HBase整合的实现是利用两者本身对外的API接口互相通信来完成的，其具体工作交由Hive的lib目录中的hive-hbase-handler-*.jar工具类来实现2、应用场景将ETL操作的数据存入HBase。

hive-hbase-handler-1.2.1.jar

09-04

被编译的hive-hbase-handler-1.2.1.jar，用于在Hive中创建关联HBase表的jar，解决创建Hive关联HBase时报FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. org.apache.hadoop....

hive根据excel批量生成建表语句

02-22

根据excel中表的字段清单，批量生成建表语句；打开工具，按格式填入表名、字段、类型等内容，点击“视图”-->“宏”-->“查看宏”-->“执行”

HBase API编程-导入Excl到HBase

weixin_43822361的博客

01-04

335

hadoop版本：hadoop-2.9.1.tar hbase版本：hbase-1.2.7-bin.tar package hadoop; import java.io.File; import java.io.FileOutputStream; import java.io.IOException; import jxl.Cell; import jxl.Sheet; import jxl....

把xls的数据导到Hbase

thomas0988

01-11

144

这属于Hbase的一个例子，不过Hbase的例子有点问题，需要更改下。其实我感觉Hbase属于一个BigTable,感觉和xls真的很像，闲话不说了，上code才是王道。 Java代码 import java.io.IOException; import org.apache.hadoop.conf.Configuration; ...

Excel数据导入到hbase实战

batman

01-29

2923

HBase 数据表导出,导入

dhmj2ee的专栏

05-23

4077

导出 1.hbase org.apache.hadoop.hbase.mapreduce.Driver export tablename tablename 2.hadoop fs -ls 查看是否存在刚刚你导出的表名 3.hadoop fs -get /user/michael/tablename . (获取到本地) 导入 1.hbase org.apache.ha

使用hbase的importTsv工具批量导入数据

西瓜刀的博客

10-14

3008

一、导入前准备 1、启动hadoop 2、启动hbase 3、准备好数据表 create 'test','fm1','fm2' 4、准备好数据（用excel另存可以得到csv文件） xx.csv数据内容如下（行号，名字，年龄）二、开始导入输入： hbase org.apache.hadoop.hbase.mapreduce.ImportTsv -Dim...

往HBase中导入csv文件的方法

幸运的Alina的博客

05-18

5464

在实际的操作中涉及到将批量的数据插入到HBase中，这样的话如果直接一条一条的通过put来进行插入，就显得尤其吃力了，在这里记录下自己所用到的方法，因为网上的资源很多都是千篇一律，然后需要配合自己的来弄，记录下对自己比较有用，以及在使用的过程中需要注意的地方。创建了一个测试的csv文件，命名为test.csv，数据长这样子首先将本地的csv文件上传到HDFS上去，这里...

HBase总结（十九）数据导入方式