hive 导入sql,text,csv文件

最新推荐文章于 2023-08-08 11:00:09 发布
最新推荐文章于 2023-08-08 11:00:09 发布
阅读量3.1k 收藏 4
点赞数
分类专栏： 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/glittledream/article/details/84640961
版权

hive执行sql文件

方法1： hive -f sql文件

   ddl.sql 文件内容：

    

CREATE TABLE TEAM_MEMBER (
 ID                                    BIGINT                     COMMENT "主键"
,COMPANY_ID                            INT                        COMMENT "公司ID"
,COMPANY_NAME                          VARCHAR(250)               COMMENT "公司名"
,CREATE_TIME                           DATE                       COMMENT "创建日期"
,DESCR                                 VARCHAR(2000)              COMMENT "人物介绍"
,GRAPH_ID                              INT                        COMMENT "公司ID"
,ICON                                  VARCHAR(512)               COMMENT "LOGO来源"
,ICON_OSS_PATH                         VARCHAR(256)               COMMENT "LOGO路径"
,NAME                                  VARCHAR(250)               COMMENT "姓名"
,TITLE                                 VARCHAR(25
最低0.47元/天 解锁文章
glittledream
关注
  • 0
    点赞
  • 踩
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
hive 导入sql_hive数据导入VS导出
weixin_35843569的博客
01-25 1079
1、数据导入到hivehive包括以下四种数据导入方式：从本地文件系统中导入数据到Hive表；从HDFS上导入数据到Hive表；在创建表的时候通过从别的表中查询出相应的记录并插入到所创建的表中；从别的表中查询出相应的数据并导入到Hive表中。1.1 本地文件导入到Hive表LOADDATALOCALINPATH'/home/hadoop/sourceA.txt'INTO TAB...
Hive之将本地文件导入Hive、使用 MySQL 存储 Metastore、Hive中常用的交互命令、Hive 其他命令操作、使用 JDBC 方式访问 Hive、编写 hive 服务启动脚本
花&败
08-19 1417
一：将本地文件导入Hive案例 需求： 将本地/opt/module/datas/student.txt这个目录下的数据导入到hive的student(id int, name string)表中。 数据准备： ⑴在/opt/module/datas/student.txt 这个目录下准备数据 启动hive，在数据库中创建的student表，并声明文件分隔符’\t’.........
将SQL文件导入Hive
Alex
06-11 1871
1、进入Mysql mysql -u root -p 输入密码进入 2、创建新的数据库 mysql>create database test; 3、选择数据库 mysql>use test; 4、设置数据库编码 mysql>set names utf8; 5、导入数据库文件 mysql>source /home/database/test.sql; ...
【SQL相关】Hive数据的导入与导出
cielo的博客
08-08 690
当数据导出语句过于复杂时，可以将SQL语句写进一个sql、hql、txt和log等后缀的文件，然后用。是Linux下的hive表数据导出命令，可以在不进入hive交互窗口的情况下执行sql语句,通过。可以将数据导出到服务器上的指定目录下，并存储为csv、xlsx、txt和log等格式的文件。是hive中打印表头的SQL语句，默认为false，打印出来是。从hive导出数据到服务器有多种方法。.
Hive 导入导出相关操作（本地、MySQL、HDFS、Sqoop） 与sql文件的导入
white_mvlog的博客
04-14 488
Hive 导入导出相关操作（本地、MySQL、HDFS、Sqoop） 与sql文件的导入
hive表导入到数据库
qq_73420934的博客
11-29 551
导数据库
csv 文件 导入hive
04-24
数据文件
将csv文件放到hive对应的服务器上
04-13
将“數倉數據提供與報表流程開發\码表导入\TY”中csv内容导入hive的码表当中。 目标csv：sfc_b_phase.csv 2、将csv文件放到hive对应的服务器上 hadoop服务器：10.176.153.32 1、将sfc_b_phase.csv放在32的root目录下...
Hive_SQL语法大全
07-13
Hive_Sql语法详述，平时工作中遇到的问题，用于Hadoop平台的数据挖掘。
hive-sql语法大全
06-15
Hive SQL 语法大全 Hive SQL 语法大全是 Hive 中的 SQL 语法说明，涵盖了数据库操作、表操作、数据类型等方面的知识点。 一、数据库操作 1. 创建数据库：CREATE DATABASE [IF NOT EXISTS] db_name [LOCATION '...
hive元数据导入sql生成工具
06-22
hive元数据生成工具-基于CDH4.7.0版本
Hive几种数据导入方式
02-26
Ambari搭建hadoop环境下，hive的数据导入
Hive-SQL语法大全
最新发布
12-23
Hive-SQL语法大全
Hive：用SQL对数据进行操作，导入数据、清洗脏数据、统计数据订单、优化结果输出等等
热门推荐
博樽
11-11 1万+
准备数据、了解数据、将数据导入hive；如何清洗第一行的脏数据？每个用户有多少个订单？ (分组)；每个用户一个订单平均是多少商品？一个订单有多少个商品？ 一个用户有多少商品？进行用户对应的商品数量 sum求和； 一个用户平均一个订单有多少个商品？ 每个用户在一周中的购买订单的分布? 一个用户平均每个购买天中，购买的商品数量？每个用户最喜爱购买的三个商品product是什么？
(一)hive导入数据
Jatham_C的博客
02-17 375
创建数据库+运行sql文件 1.create database XXX； 2.sql文件路径下运行hive -f XXX.sql 注：若出现错误line1:0 不识别，检查sql文件和编码格式（应该为utf-8 无bom） UE修改文件格式 用datax导入hive表 元数据存于mysql 1.配置文件：mysql2hive.json { "job": { "conte...
hive中执行.sql文件
qq_40302627的博客
05-11 1073
hive -e hive -e “source 路径/文件.sql” hive -e ""也可以直接执行sql语句 hive -f #hive文件/cib/a.sql中的语句： select * from student where etl_date='${hivevar:input_date}' and jxsj='${hivevar:yesterday}'; 执行a.sql文件 `hive -hivevar input_date=20200202 -hivevar yesterday=2020020
linux查询hive sql输出文件,Hive导入和导出数据
weixin_39602280的博客
04-29 564
hive官方提供两种导入数据的方式1 从表中导入：insert overwrite table testselect * from test2;2 从文件导入：2.1 从本地文件导入：load data local inpath '/Hadoop/aa.txt' overwrite into table test112.2 从hdfs导入load data inpath '/hadoop/aa....
Hive中sql的使用
成都往右的博客
10-22 1770
如果学过mysql或者oracle等数据库那么hive的sql肯定不会有问题，只有比较小的出入。
关于hive数据的导入
weixin_43814165的博客
09-05 394
关于hive数据的导入
python连接hdfs和hive，将hdfs中的csv文件导入hive的数据表中
04-04
可以使用PyHive库连接Hive和HDFS，并使用HiveQL语句将HDFS中的CSV文件导入Hive数据表中。下面是一个示例代码： ```python from pyhive import hive import pandas as pd # 连接Hive conn = hive.connect(host='localhost', port=10000, username='username') # 创建Hive表 create_table_qry = """ CREATE TABLE IF NOT EXISTS my_table ( col1 STRING, col2 INT, col3 FLOAT ) ROW FORMAT DELIMITED FIELDS TERMINATED BY ',' LINES TERMINATED BY '\n' STORED AS TEXTFILE """ with conn.cursor() as cur: cur.execute(create_table_qry) # 从HDFS中导入数据到Hive表 load_data_qry = """ LOAD DATA INPATH '/path/to/csv/file.csv' INTO TABLE my_table """ with conn.cursor() as cur: cur.execute(load_data_qry) # 查询导入的数据 select_qry = """ SELECT * FROM my_table """ df = pd.read_sql(select_qry, conn) print(df.head()) # 关闭连接 conn.close() ``` 其中，需要将`host`和`username`参数替换为实际的Hive主机名和用户名，将`/path/to/csv/file.csv`替换为实际的HDFS中CSV文件的路径。在上述代码中，使用Pandas库读取Hive数据表中的数据并打印前5行。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值