beeline导出CSV

最新推荐文章于 2023-01-10 09:24:24 发布
最新推荐文章于 2023-01-10 09:24:24 发布
阅读量1.2k 收藏 2
点赞数
分类专栏： hadoop 文章标签： hadoop hive
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zh_s_z/article/details/120652448
版权
这篇博客介绍了如何使用Beeline工具来连接Hive服务器，执行SQL查询。通过设置用户名、密码、JDBC连接驱动以及指定服务器、端口和数据库，可以实现无表头、静默模式和TSV2格式的输出。链接提供了Beeline的官方文档和中文详细解释。
摘要由CSDN通过智能技术生成

sql_per="select * from dual "
beeline -n zsz -p  zsz -u jdbc:hive2://mx163p113:10000/yyyf --showHeader=false --silent=true --outputformat=tsv2  -e "${sql_per}"

-n zsz    用户名
-p  zsz  密码(有的配置不需要密码)
-u JDBC连接驱动。
    jdbc:hive2://服务器名:端口号/库名
--showHeader=false   ## 不要表头。
--silent=true        ## 减少信息展示。
--outputformat=tsv2  ## 输出格式。

beeline官方说明
https://cwiki.apache.org/confluence/display/Hive/HiveServer2+Clients#HiveServer2Clients-Separated-ValueOutputFormats

beeline 下面连接是中文文档。

hive beeline详解 - 老董 - 博客园

zh_s_z
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
hive导出到csv hive导出到excel
yy的博客
11-19 5039
-- 导出到csv 逗号分隔 列中字符串含逗号容易冲突 hive -e "set hive.cli.print.header=true;set hive.tez.container.size=3020;set hive.execution.engine=tez;select * from dwd.dwd_fact_issue_issue_and_reply" | sed 's/[\t]/,/g' > ./res.csv -- 导出到文本 \t分隔 方便复制到excel hive -e "s
spark数据导入导出
alexpeace的博客
12-22 5441
【场景】 1、数据导入：结构化数据，hive中 2、代码提交： (1) spark-shell的方式 (2) spark-submit的方式，代码已经编译好。 (3) zeppelin，spark编码的方式 3、数据输出： (1) csv,json (2) 本地化，hive 【实现】 1、spark-shell： 交互式编程，涉及到外包包依赖时，将需要的jar包都下载
beeline的使用方法以及导出csv需要注意的问题
anyitian的博客
03-31 4944
文章目录概述参数示例注意问题 概述 最近需要导出hive的数据到clickhouse，但是由于某些原因使用不了datax，只有使用beeline导出数据csv，在写入clickhouse。 Beeline是Hive新的命令行客户端工具，是从 Hive 0.11版本引入的。 参数 --常用 --help ---帮助 beeline --help --maxWidth=MAXWIDTH ---设置截断数据的最大宽度：beeline --maxWidth=150 -e <query> ---使用一
beeline导出csv
大胃德的算法小屋
05-17 2599
导出csv beeline -n dmp -p dmp@MLJR -u jdbc:hive2://10.8.49.171:10000/risk_prsv -f hivesql3.hql --showHeader=true --outputformat=csv2 --silent=true > output.csv
beeline-导出csv
weixin_34238633的博客
03-09 1503
2019独角兽企业重金招聘Python工程师标准>>> ...
beeline 查询表数据导出到本地文件csv
xiaoge的博客
01-23 7577
beeline -u jdbc:hive2://10.000.000.000:10000 -n test -p test -d org.apache.hive.jdbc.HiveDriver --outputformat=csv2 -e "select * from test limit 10" &gt; data.csv  
beeline查询表数据导出到本地csv文件以及将本地csv文件数据导入表中
独孤飞磊
01-08 2674
beeline查询表数据导出到本地csv文件 beeline -u jdbc:hive2://weshare003:10000 -d org.apache.hive.jdbc.HiveDriver --outputformat=csv2 -e "select * from dm_cf_test.dm_user_info limit 1" > fl.csv 将本地csv文件数据导入表中 进入...
csv 单引号 数字_导入csv格式数据文件时存在单引号，应该怎么去掉(追问)？
weixin_42127754的博客
12-30 1607
我有一份csv文件想导入dolphindb，原始数据的前两列内容如下，且没有字段名：第一个字段名应该是time，类型应该是STRING，且带有单引号('')；第二个字段名应该是id，类型应该也是STRING，且带有单引号('')，但是有效id的长度是6位，也有可能是5位，所以用下列代码导入时有问题：//创建分区数据库和表def createDatabaseAndTable(dbUrl, table...
hive导出csv文件，合并查询结果到csv文件
零零七的博客
07-15 1005
方法一：hive -e或者beline -e直接导出csv文件 hive -e "SET hive.cli.print.header=true; SELECT id, name, age, sex FROM bxm.kudu_user" | sed 's/\t/,/g' >1111.csv; exportFile.sh beeline -u "jdbc:hive2://ip:10000/circ_db" -n admin -p '123456' --showHeade...
beeline 将查询的数据导出来_HIVE数据导出CSV
weixin_42519126的博客
01-17 2415
此前一直使用HIVE的Insert overwrite到本地目录的方法进行文件导出，但问题多多。主要原因是分隔符经常出现在字段中，实操中用竖杠|分隔问题较少。insert overwrite local directory '/url/lxb/hive'row format delimitedfields terminated by ','select * from table_name limi...
beeline连接hive的导出数据格式的参数及设置
sodaloveer的博客
01-10 3863
beeline连接hive的导出数据格式的参数及设置
04Servlet-5. Servlet的类试图详解
学无止境
09-10 347
1、什么是 Servlet? Java Servlet 是运行在 Web 服务器或应用服务器上的程序，它是作为来自 Web 浏览器或其他 HTTP 客户端的请求和 HTTP 服务器上的数据库或应用程序之间的中间层。使用 Servlet，可以收集来自网页表单的用户输入，呈现来自数据库或者其他源的记录，还可以动态创建网页。 2、Servlet 入门实例 第一步：创建一个JavaWeb项目，并创建一个servlet类-----HelloServlet,实现接口 Servlet 1 2 3 4 5 6 7 8 9
beeline 将查询的数据导出来_hive导出数据
weixin_39556811的博客
02-23 614
1.用insert，写到hdfs目录下，但是目录好像要由hive用户创建才可以，否则会报错INSERT OVERWRITE DIRECTORY '/tmp/test1029_tmp' ROW FORMAT DELIMITED FIELDS TERMINATED by ',' select * from bank_info;+----------+-------+-----------+------...
beeline没有表头的解决办法
yuxeaotao的博客
03-13 1599
投脚本的时候写成这样： beeline --showHeader=true -f filename.sql
7 Hive数据仓库
悟空非空也
10-11 887
数据仓库简介 数据仓库是一个面向主题的、集成的、随时间变化的，但信息本身相对稳定的数据集合，它用于支持企业或组织的决策分析处理，这里对数据仓库的定义，指出了数据仓库的三个特点。 数据仓库的结构 数据仓库的结构是由数据源、数据存储及管理、OLAP服务器和前端工具四个部分组成。 数据源是数据仓库的基础，即系统的数据来源，通常包含企业的各种内部信息和外部信息。 数据存储及管理是整个数据仓库的核心，决定了对外部数据的表现形式，针对系统现有的数据，进行抽取、清理并有效集成，再按照主题进行组织。 OLAP服务器对需要
spark-beeline导出hive表数据到csv方法，乱码原因及解决方案
SunWuKong_Hadoop的博客
02-14 3460
亲测语句1：  spark-beeline -u jdbc:hive2://10.254.1.1:13002,10.254.1.1:13002,10.254.1.1:13002 --verbose=true --outputformat=csv -e "select * from lqioc_ioc_ods.wghhjrkxx limit 100000"&gt;wghhjrkxx.csv ...
beeline数据导出，指定分隔符，去掉格式
qq_33358554的博客
07-10 6695
beeline -u jdbc:hive2://host:10000 --incremental=true --showHeader=false --outputformat=dsv --delimiterForDSV=$'\t' -e 'select * from test' > file.csv 参数 说明 –incremental=[true/false] 从Hive 2.3版本往后默认是true，在它之前是默认为false。当设置为false时，为了最佳的展示列宽，完整的结果
beeline 将查询的数据导出来_Hive数据导出的几种方式
weixin_39996798的博客
01-17 4482
在hive的日常使用中，经常需要将hive表中的数据导出来，虽然hive提供了多种导出方式，但是面对不同的数据量、不同的需求，如果随意就使用某种导出方式，可能会导致导出时间过长，导出的结果不满足需求，甚至造成集群资源不必要的浪费。因此本文主要对hive支持的几种导出方式的使用进行整理，并给出每种导出方式的使用场景，便于指导操作者能够选取最佳的导出方式。利用insert overwrite的方式，将...
hive beeline后台导数
yangxiangjuan的博客
07-03 1522
hive 后台导数
beeline 设置outputformat csv
最新发布
06-08
您可以使用以下命令来设置Beeline查询结果的输出格式为CSV格式： ``` !set hive.cli.print.header=true !set hive.resultset.use.unique.column.names=false !set outputformat csv !set csv.separator="," !set ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值