Hive表数据的导入和导出详解

最新推荐文章于 2024-07-23 10:46:14 发布
最新推荐文章于 2024-07-23 10:46:14 发布
阅读量1.6k 收藏 1
点赞数 1
分类专栏： Hive 文章标签： hive hdfs
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/thegreatant/article/details/108087828
版权
本文详细讲解了Hive表数据的导入和导出操作，包括向表中装载数据、通过查询语句插入数据、创建表并加载数据、使用Location指定数据路径以及Import、Export操作。同时介绍了数据导出的各种方式，如Insert导出、Hadoop命令导出、Hive Shell命令导出和Export导出到HDFS，强调了操作注意事项和最佳实践。
摘要由CSDN通过智能技术生成

Hive表数据的导入和导出详解

一、数据导入

1.1 向表中装载数据（Load）

（1）创建一张表

hive (default)> create table student(id int, name string) row 
format delimited fields terminated by '\t';

（1）加载本地文件到hive

hive (default)> load data local inpath '本地文件路径' into table
student;

（2）加载HDFS文件到hive中

hive (default)> dfs -put 'hdfs文件路径' /user/atguigu;

加载HDFS上数据，导入完成后去hdfs查看文件是否还存在

hive (default)> load data inpath 'hdfs文件路径' into table student;

加载数据覆盖表中已有的数据


                

                
                
        

        

    




        

            

                    
                      最低0.47元/天 解锁文章
                        
                    
            

        

    

      

        

            

              
                
                  伟大的小蚂蚁
                
              
            

            

                关注
              
            

        

        

          
    
            
  • 
              
                
                
                
                
                    1
                
              
              
    点赞
    
            
    • 
            
  • 
              
                
                
                
              
              
    踩
    
            
    • 
            
  • 
              
                
                
                
                
                    1
                
              
              
    
                
    
                  
                    收藏
                  
                
    
              
    
              
    
                
    
                  觉得还不错?
                  
                    一键收藏
                  
                 
                
    
              
    
            
    • 
          
  • 
            
    
              
              
            
    
              
              
              
                    0
              
            
            
    评论
    
          
    • 
          
  • 
          
    • 
          
  • 
            
              
            
              
    
            
              
                
            
    
          
    • 
        

      

      

            

                专栏目录
          










                



	

		

			

				
					
Hive的数据导入和导出方式

				
			

			

				

					madman
				

				

					03-19
					
					1119
					
				

			

		

		

			
				

  HIve导入数据和导出数据的方式


load方式，本地 
load data local inpath 'local_path' into table tb_name; 
从本地复制了文件到表的路径下 
应用场景：大部分的使用，文件几乎都是默认现在本地的 
 
load方式，HDFS 
load data inpath 'hdfs_path' into table tb_name; 
将文...

			
		

	



                

              
                



	

		

			

				
					
hive表中的数据导出:表数据的导出7种方式

					
热门推荐

				
			

			

				

					
				

				

					11-26
					
					1万+
					
				

			

		

		

			
				
将hive表中的数据导出到其他任意目录，例如linux本地磁盘，例如hdfs，例如mysql等等
insert导出
1）将查询的结果导出到本地 ：第一种
insert overwrite local directory '/export/servers/exporthive/a' 
select * from score;

2）将查询的结果格式化导出到本地 ：第二种
insert overwri...

			
		

	



                


  
              

                


	

		

			

				
					
hive 表结构导出

				
			

			

				

					05-19
				

			

		

		

			
				
支持hive 源数据、表结构导出

			
		

	





	

		

			

				
					
hive学习笔记——Hive表中数据的导入和导出

				
			

			

				

					null的专栏
				

				

					08-04
					
					9236
					
				

			

		

		

			
				
在创建数据表的过程中，Hive表创建完成后，需要将一些数据导入到Hive表中，或是将Hive表中的数据导出。
一、将数据导入Hive表
Hive表的数据导入主要有三种方式：


从本地文件系统中导入数据到Hive表中从HDFS上导入数据到Hive表中从别的表中查询出相应的数据导入到Hive表中在创建Hive表时通过从别的表中查询并插入的方式将数据导入到Hive表中
1、从本地文件系统中

			
		

	



		

			
		



	

		

			

				
					
Hive数据导入导出的几种方式

				
			

			

				

					qianshanding0708的博客
				

				

					12-25
					
					1万+
					
				

			

		

		

			
				
一，Hive数据导入的几种方式

首先列出讲述下面几种导入方式的数据和hive表。

Hive表：

创建testA：

 


CREATE TABLE testA (
	id INT,
	name string,
	area string
) PARTITIONED BY (create_time string) ROW FORMAT DELIMITED FIELDS TERMINATED B...

			
		

	





	

		

			

				
					
Hive表数据的加载与导出

				
			

			

				

					大数据梦想家
				

				

					11-23
					
					4946
					
				

			

		

		

			
				
        本篇博客,小菌为大家详细地带来Hive中表数据的加载与导出。
Hive表数据加载
1.直接向分区表中插入数据
insert into table score3 partition(month =‘201807’) values (‘001’,‘002’,‘100’);
2、通过查询插入数据
(linux...

			
		

	





	

		

			

				
					
Hive输入导入导出操作

				
			

			

				

					司马班如
				

				

					05-22
					
					281
					
				

			

		

		

			
				
Hive输入导入导出操作一、导入操作1.1 向表中加载数据（load data）1.2 通过查询语句向表中插入数据（Insert）1.3 查询语句中创建表并加载数据（As Select）1.4 创建表时通过Location指定加载数据路径1.5 Import数据到指定Hive表中二、导出数据操作2.1 Insert导出2.2 把数据文件导出到本地2.3 Hive Shell 命令导出2.4 Export导出到HDFS上
Hive表导入导出数据有很多种，分别如下所示：
一、导入操作
1.1 向表中加载数据（l

			
		

	





	

		

			

				
					
datax数据从hive导入mysql数据缺失解决

				
			

			

				

					01-18
				

			

		

		

			
				
### DataX 数据从 Hive 导入 MySQL 数据缺失...- 持续监控系统性能和数据质量，及时发现问题并采取相应措施。  通过以上分析和实践，我们不仅解决了当前的数据缺失问题，也为未来处理类似问题提供了宝贵的经验和参考。

			
		

	





	

		

			

				
					
Hive案例数据集.rar

				
			

			

				

					10-27
				

			

		

		

			
				
1. 数据加载：使用LOAD DATA命令将本地文件系统或HDFS上的数据导入到Hive表中。 2. 表操作：创建表（CREATE TABLE），删除表（DROP TABLE），修改表结构（ALTER TABLE）。 3. 查询操作：使用SELECT语句进行数据查询...

			
		

	





	

		

			

				
					
23-Sqoop数据导入导出1

				
			

			

				

					08-08
				

			

		

		

			
				
【Sqoop数据导入导出详解】  Sqoop是一个用于在关系型数据库和Hadoop之间传输数据的工具，它利用Hadoop的MapReduce框架实现大规模数据的高效导入和导出。本篇将详细介绍Sqoop的导入和导出过程，以及在MySQL、HDFS、...

			
		

	





	

		

			

				
					
【63课时完整版】大数据实践HIVE详解及实战

				
			

			

				

					09-20
				

			

		

		

			
				
16.Hive中数据导出的4种方式及表的导入导出 17.Hive中HQL的基本语法（一） 18.Hive中HQL的基本语法（二） 19.Hive中order by、sort by、distribute by与cluster by的使用 20.Hive中分析函数与窗口函数 21.Hive中UDF...

			
		

	





	

		

			

				
					
DBeaver链接hive驱动包下载：
hive-jdbc-uber-2.6.5.0-292.jar

				
			

			

				

					05-17
				

			

		

		

			
				
3. 导入导出数据：DBeaver还支持数据导入导出，方便在Hive与其他数据库之间进行数据迁移。  四、注意事项  1. 版本兼容性：确保下载的Hive JDBC驱动版本与运行的Hive服务器版本匹配，否则可能无法正常连接。  2. ...

			
		

	





	

		

			

				
					
hive数据库操作、数据表操作、数据的导入和导出命令

				
			

			

				

					lds_include
				

				

					03-22
					
					1093
					
				

			

		

		

			
				
hive的基本命令
数据库的创建
定义

本质上是在hdfs上创建一个目录，使用comment加入数据库的描述信息，描述信息放在引号里。数据库的属性信息放在描述信息之后用with dbproperties 加入，属性信息放在括号内，属性名和属性值放在引号里，用等号连接有多条属性用逗号分隔

例子
##创建一个数据库名为myhive,加入描述信息及属性信息
create database myhiv...

			
		

	





	

		

			

				
					
Hive数据类型、数据库相关操作、表的相关操做、数据的导入导出

				
			

			

				

					yingzi的技术博客
				

				

					01-22
					
					931
					
				

			

		

		

			
				
文章目录Hive数据类型1.基本数据类型2.集合数据类型案例实操3.类型转化数据库的相关操作1.创建数据库2.查询数据库3.修改数据库4.删除数据库表的相关操作1.建表2.管理表3.外部表4.管理表与外部表的互相转换5.重命名表6.增加/修改/替换列信息7.删除表DML数据操作1.数据导入1）向表中装载数据2）通过查询语句向表中插入数据（Insert）3) 查询语句中创建表并加载数据(As Select)4）创建表时通过Location指定加载数据路径5）Import数据指定Hive表中2.数据导出1）In

			
		

	





	

		

			

				
					
五, Hive-数据的导入和导出

				
			

			

				

					菜菜的大数据开发の路
				

				

					08-03
					
					261
					
				

			

		

		

			
				
五, Hive-数据的导入和导出
5.1 数据导入
法1, 向表中装载数据(load)
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-oP6YViMW-1627981666146)(2021-08-03-14-33-12.png)]
[案例实操]

创建表
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-W8nNN6Hh-1627981666150)(2021-08-03-14-44-50.png)]
加载本地文件到此表中
[外链图片转存失败,源

			
		

	





	

		

			

				
					
Hive（五）—— Hive数据导入/导出

				
			

			

				

					分享AI工具、AI技术、AI学习经验，感谢大家关注
				

				

					03-09
					
					331
					
				

			

		

		

			
				
文章目录1. 数据导入1.1 方式一：load data方式向表中装载数据1.2 方式二：通过查询语句向表中插入数据（Insert）1.3 方式三：查询语句中创建表并加载数据（As Select）1.4 方式四：创建表时通过location制定加载数据路径1.5 方式五：Import数据导指定Hive表中2. 数据导出2.1 方式一：insert导出2.2 方式二：Hadoop命令导出到本地2.3...

			
		

	





	

		

			

				
					
hive 数据导入 导出

				
			

			

				

					qq_43192537的博客
				

				

					09-23
					
					1504
					
				

			

		

		

			
				
hive中数据导入

1. 加载本地文件studet.txt到hive(拷贝+追加)
注：/opt/moudles/cdh/hive-0.13.1-cdh5.3.6/input是本地文件所在路径
注：student表中 只有两个字段 id	name

hive (default)> load data local inpath ‘/opt/moudles/cdh/hive-0.13.1-cd..................

			
		

	





	

		

			

				
					
Hbase映射为Hive外表

					
最新发布

				
			

			

				

					
				

				

					07-23
					
					343
					
				

			

		

		

			
				
作者：振鹭。

			
		

	





	

		

			

				
					

				
			

			

				

					
				

			

		

		

			
				

			
		

	



              




          




        



    





    



      

      

        
      

      





	

		评论	
	

	
	




  

    

      添加红包
      
    

    

      

        
        

          
          
        

        
请填写红包祝福语或标题

      

      

        
        

          
          个
        

        
红包个数最小为10个

      

      

        
        

          
          元
        

        
红包金额最低5元

      

      

        
        

          当前余额3.43元
          前往充值 >
        

      

      

        

          需支付：10.00元
        

        
        
      

    

  





  

    
    
  

  

    
    
  








  

    

      

        

          

            
            
成就一亿技术人!

          

          

        

        

          

          

            领取后你会自动成为博主和红包主的粉丝
            规则
          

        

      

      

        

          

            
              
            
            

              
hope_wisdom
 发出的红包
            

          

        

        

          

          

          

        

      

    

    

  



      
      

      
实付元

      
使用余额支付

      

        

          

            
            点击重新获取
          

        

        
扫码支付

      

      

        
          
            
          
          
        
      

      

        
        钱包余额
          0
          

            
            

              

                
抵扣说明：

                
 1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
 2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

              

            

          

      

      余额充值