Hive部署和3种搭建模式

最新推荐文章于 2024-05-30 13:02:37 发布
最新推荐文章于 2024-05-30 13:02:37 发布
阅读量2.5k 收藏 4
点赞数
分类专栏： 大数据 文章标签： hive

Hive部署

 

 

 　　以上，是参考《Hadoop海量数据处理  技术详解与项目实战》
Hive搭建模式

1、local模式此模式连接到一个In-memory 的数据库Derby，一般用于Unit Test。

这种方式是最简单的存储方式，只需要在hive-site.xml做如下配置便可


  
  
  1. 
    
    
    
     
     
    
    
    
    
    
    
    
     
     
    
      
      <property>  
     
     
    
    
    
  2. 
    
    
    
     
     
    
    
    
    
    
    
    
     
     
    
      
        <name>javax.jdo.option.ConnectionURL</name>  
     
     
    
    
    
  3. 
    
    
    
     
     
    
    
    
    
    
    
    
     
     
    
      
        <value>jdbc:derby:;databaseName=metastore_db;create=
      
      true</value>  
     
     
    
    
    
  4. 
    
    
    
     
     
    
    
    
    
    
    
    
     
     
    
      
      </property>  
     
     
    
    
    
  5. 
    
    
    
     
     
    
    
    
    
    
    
    
     
     
    
      
         
     
     
    
    
    
  6. 
    
    
    
     
     
    
    
    
    
    
    
    
     
     
    
      
      <property>  
     
     
    
    
    
  7. 
    
    
    
     
     
    
    
    
    
    
    
    
     
     
    
      
        <name>javax.jdo.option.ConnectionDriverName</name>  
     
     
    
    
    
  8. 
    
    
    
     
     
    
    
    
    
    
    
    
     
     
    
      
        <value>org.apache.derby.jdbc.EmbeddedDriver</value>  
     
     
    
    
    
  9. 
    
    
    
     
     
    
    
    
    
    
    
    
     
     
    
      
      </property>  
     
     
    
    
    
  10. 
    
    
    
     
     
    
    
    
    
    
    
    
     
     
    
      
         
     
     
    
    
    
  11. 
    
    
    
     
     
    
    
    
    
    
    
    
     
     
    
      
      <property>  
     
     
    
    
    
  12. 
    
    
    
     
     
    
    
    
    
    
    
    
     
     
    
      
        <name>hive.metastore.local</name>  
     
     
    
    
    
  13. 
    
    
    
     
     
    
    
    
    
    
    
    
     
     
    
      
        <value>
      
      true</value>  
     
     
    
    
    
  14. 
    
    
    
     
     
    
    
    
    
    
    
    
     
     
    
      
      </property>  
     
     
    
    
    
  15. 
    
    
    
     
     
    
    
    
    
    
    
    
     
     
    
      
         
     
     
    
    
    
  16. 
    
    
    
     
     
    
    
    
    
    
    
    
     
     
    
      
      <property>  
     
     
    
    
    
  17. 
    
    
    
     
     
    
    
    
    
    
    
    
     
     
    
      
        <name>hive.metastore.warehouse.dir</name>  
     
     
    
    
    
  18. 
    
    
    
     
     
    
    
    
    
    
    
    
     
     
    
      
        <value>/user/hive/warehouse</value>  
     
     
    
    
    
  19. 
    
    
    
     
     
    
    
    
    
    
    
    
     
     
    
      
      </property>

注：使用derby存储方式时，运行hive会在当前目录生成一个derby文件和一个metastore_db目录。这种存储方式的弊端是在同一个目录下同时只能有一个hive客户端能使用数据库，否则会提示错误



2、单用户模式

这种存储方式需要在本地运行一个mysql服务器，并作如下配置（下面两种使用mysql的方式，需要将mysql的jar包拷贝到$HIVE_HOME/lib目录下）。

在hive-site.xml做如下配置


 
 
  1. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     <property>  
    
    
    
   
   
  2. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <name>hive.metastore.warehouse.dir</name>  
    
    
    
   
   
  3. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <value>/user/hive_remote/warehouse</value>  
    
    
    
   
   
  4. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     </property>  
    
    
    
   
   
  5. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
        
    
    
    
   
   
  6. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     <property>  
    
    
    
   
   
  7. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <name>hive.metastore.local</name>  
    
    
    
   
   
  8. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <value>
     
     true</value>  
    
    
    
   
   
  9. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     </property>  
    
    
    
   
   
  10. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
        
    
    
    
   
   
  11. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     <property>  
    
    
    
   
   
  12. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <name>javax.jdo.option.ConnectionURL</name>  
    
    
    
   
   
  13. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <value>jdbc:mysql:
     
     //localhost/hive_remote?createDatabaseIfNotExist=true</value>  
    
    
    
   
   
  14. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     </property>  
    
    
    
   
   
  15. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
        
    
    
    
   
   
  16. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     <property>  
    
    
    
   
   
  17. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <name>javax.jdo.option.ConnectionDriverName</name>  
    
    
    
   
   
  18. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <value>com.mysql.jdbc.Driver</value>  
    
    
    
   
   
  19. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     </property>  
    
    
    
   
   
  20. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
        
    
    
    
   
   
  21. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     <property>  
    
    
    
   
   
  22. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <name>javax.jdo.option.ConnectionUserName</name>  
    
    
    
   
   
  23. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <value>hive</value>  
    
    
    
   
   
  24. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     </property>  
    
    
    
   
   
  25. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
        
    
    
    
   
   
  26. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     <property>  
    
    
    
   
   
  27. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <name>javax.jdo.option.ConnectionPassword</name>  
    
    
    
   
   
  28. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <value>password</value>  
    
    
    
   
   
  29. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     </property>  

附：

安装mysql  

Yum install mysql-server -y

 

修改mysql权限：

GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY '123' WITH GRANT OPTION;

flush privileges;

删除多余会对权限造成影响的数据
刷新权限

[ERROR] Terminal initialization failed; falling back to unsupported

java.lang.IncompatibleClassChangeError: Found class jline.Terminal, but interface was expected

at jline.TerminalFactory.create(TerminalFactory.java:101)

错误的原因： Hadoop jline版本和hive的jline不一致



3、远程服务器模式/多用户模式

1.Remote一体（hive的服务端和客户端都放在同一台服务器上）

这种存储方式需要在远端服务器运行一个mysql服务器，并且需要在Hive服务器启动meta服务。


在 hive-site.xml 做如下配置 


 
 
  1. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     <property>  
    
    
    
   
   
  2. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <name>hive.metastore.warehouse.dir</name>  
    
    
    
   
   
  3. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <value>/user/hive/warehouse</value>  
    
    
    
   
   
  4. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     </property>  
    
    
    
   
   
  5. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
       
    
    
    
   
   
  6. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     <property>  
    
    
    
   
   
  7. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <name>javax.jdo.option.ConnectionURL</name>  
    
    
    
   
   
  8. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <value>jdbc:mysql:
     
     //192.168.57.6:3306/hive?createDatabaseIfNotExist=true</value> 
    
    
    
   
   
  9. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     </property>  
    
    
    
   
   
  10. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
       
    
    
    
   
   
  11. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     <property>  
    
    
    
   
   
  12. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <name>javax.jdo.option.ConnectionDriverName</name>  
    
    
    
   
   
  13. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <value>com.mysql.jdbc.Driver</value>  
    
    
    
   
   
  14. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     </property>  
    
    
    
   
   
  15. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
       
    
    
    
   
   
  16. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     <property>  
    
    
    
   
   
  17. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <name>javax.jdo.option.ConnectionUserName</name>  
    
    
    
   
   
  18. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <value>hive</value>  
    
    
    
   
   
  19. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     </property>  
    
    
    
   
   
  20. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
       
    
    
    
   
   
  21. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     <property>  
    
    
    
   
   
  22. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <name>javax.jdo.option.ConnectionPassword</name>  
    
    
    
   
   
  23. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <value>password</value>  
    
    
    
   
   
  24. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     </property>  
    
    
    
   
   
  25. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
      
    
    
    
   
   
  26. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     <property>  
    
    
    
   
   
  27. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <name>hive.metastore.local</name>  
    
    
    
   
   
  28. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <value>
     
     false</value>  
    
    
    
   
   
  29. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     </property>  
    
    
    
   
   
  30. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
      
    
    
    
   
   
  31. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     <property>  
    
    
    
   
   
  32. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <name>hive.metastore.uris</name>  
    
    
    
   
   
  33. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <value>thrift:
     
     //192.168.1.188:9083</value>  //当前服务器
    
    
    
   
   
  34. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     </property>


2.Remote分开（hive的服务端和客户端放在两台服务器上）

将hive-site.xml配置文件拆为如下两部分

 1）、服务端配置文件


 
 
  1. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     <property>  
    
    
    
   
   
  2. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <name>hive.metastore.warehouse.dir</name>  
    
    
    
   
   
  3. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <value>/user/hive/warehouse</value>  
    
    
    
   
   
  4. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     </property>  
    
    
    
   
   
  5. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
        
    
    
    
   
   
  6. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     <property>  
    
    
    
   
   
  7. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <name>javax.jdo.option.ConnectionURL</name>  
    
    
    
   
   
  8. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <value>jdbc:mysql:
     
     //192.168.57.6:3306/hive?createDatabaseIfNotExist=true</value>  
    
    
    
   
   
  9. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     </property>  
    
    
    
   
   
  10. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
        
    
    
    
   
   
  11. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     <property>  
    
    
    
   
   
  12. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <name>javax.jdo.option.ConnectionDriverName</name>  
    
    
    
   
   
  13. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <value>com.mysql.jdbc.Driver</value>  
    
    
    
   
   
  14. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     </property>  
    
    
    
   
   
  15. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
        
    
    
    
   
   
  16. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     <property>  
    
    
    
   
   
  17. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <name>javax.jdo.option.ConnectionUserName</name>  
    
    
    
   
   
  18. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <value>root</value>  
    
    
    
   
   
  19. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     </property>  
    
    
    
   
   
  20. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
        
    
    
    
   
   
  21. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     <property>  
    
    
    
   
   
  22. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <name>javax.jdo.option.ConnectionPassword</name>  
    
    
    
   
   
  23. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <value>
     
     123456</value>  
    
    
    
   
   
  24. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     </property>  

 2）、客户端配置文件


 
 
  1. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     <property>  
    
    
    
   
   
  2. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <name>hive.metastore.warehouse.dir</name>  
    
    
    
   
   
  3. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <value>/user/hive/warehouse</value>  
    
    
    
   
   
  4. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     </property>  
    
    
    
   
   
  5. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
        
    
    
    
   
   
  6. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     <property>  
    
    
    
   
   
  7. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <name>hive.metastore.local</name>  
    
    
    
   
   
  8. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <value>
     
     false</value>  
    
    
    
   
   
  9. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     </property>  
    
    
    
   
   
  10. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       
    
    
    
   
   
  11. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     <property>  
    
    
    
   
   
  12. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <name>hive.metastore.uris</name>  
    
    
    
   
   
  13. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
       <value>thrift:
     
     //192.168.57.5:9083</value>  //服务器端
    
    
    
   
   
  14. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     </property>



启动hive服务端程序

 hive --service metastore   

客户端直接使用hive命令即可


 
 
  1. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     root
     
     @my188:~$ hive   
    
    
    
   
   
  2. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     Hive history file=/tmp/root/hive_job_log_root_201301301416_955801255.txt  
    
    
    
   
   
  3. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     hive> show tables;  
    
    
    
   
   
  4. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     OK  
    
    
    
   
   
  5. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     test_hive  
    
    
    
   
   
  6. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     Time taken: 
     
     0.736 seconds  
    
    
    
   
   
  7. 
   
   
    
    
    
    
   
   
    
   
   
    
    
    
    
     
     hive>  

注意：

客户端启动的时候要注意：

[ERROR] Terminal initialization failed; falling back to unsupported

java.lang.IncompatibleClassChangeError: Found class jline.Terminal, but interface was expected

at jline.TerminalFactory.create(TerminalFactory.java:101)

错误的原因： Hadoop jline版本和hive的jline不一致


yimenglin
关注
  • 0
    点赞
  • 踩
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
基于大数据集群的hive搭建
10-30
本文将详细介绍如何在大数据集群上搭建 Hive，主要包括三种运行模式的概述以及本地模式的详细步骤。 首先，Hive 提供了三种运行模式： 1. **内嵌模式**：元数据存储在本地的内嵌 Derby 数据库中，适合单用户开发和...
大数据学习：Hive部署.pdf
12-07
"大数据学习：Hive部署" 在大数据学习中，Hive是一个非常重要的组件...本篇文章详细讲解了Hive部署的每一步操作步骤，从搭建Linux环境到部署Hive，都是非常重要的步骤。如果你想学习Hive，准备Hive环境是至关重要的。
hive配置
我是泛滥
02-28 273
一、hive三种模式 local模式（内嵌derby） 单用户模式（mysql） 多用户模式 二、local模式 元数据信息被存储在Hive自带的Derby数据库中 只允许创建一个连接 多用于Demo(演示和第一次安装测试) hivelocal模式（Hadoop进程开启） 1.上传apache-hive-1.2.1-bin.tar.gz解压（就按我的目录作为例子） tar -zxvf ap...
Hive文件存储格式（建表stored as 的五种类型）
清平乐的技术专栏
05-17 2万+
一、综述 1.建表规范 我们知道hive建表的完成格式如下： CREATE [EXTERNAL] TABLE [IF NOT EXISTS] table_name [(col_name data_type [COMMENT col_comment], ...)] [COMMENT table_comment] [PARTITIONED BY(col_name data_typ
hive搭建(详细保姆级教学)
最新发布
weixin_73692048的博客
05-30 405
由于安装过程中没有设置root 用户密码，无法直接登录。链接：https://pan.baidu.com/s/1u49At39eNogCdz-DMIV3Ew。：命令中的user替换为你的user，密码为你的passwd,比如我的命令mysql -u。下载并导入mysql jdbc驱动：默认你已经将jar包下载到~/Downloads目录。默认你已经下载好安装包，并且在~/Downloads目录下。之后，就可以使用hive这个账户登录mysql。配置完成，启动Hadoop，hive。
[Hadoop高可用集群]数仓工具之Hive的安装部署（超级详细，适用于初学者）
喜欢水星记的博客
05-15 4905
Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。最初，Hive是由Facebook开发，后来由Apache软件基金会开发，并作为进一步将它作为名义下Apache Hive为一个开源项目。Hive 建立在Hadoop 基础之上,Hive 与 Hadoop 紧密集成，其设计可快速对 PB 级数据进行操作。
Hive大数据项目环境搭建：安装部署Hive（超详细）
qq_58476985的博客
11-03 2063
（先保存一下hive3.1.2的路径：/home/hadoop/software/hive3.1.2，和hadoop-3.3.0的路径：/home/hadoop/software/hadoop-3.3.0。进入目录：/home/hadoop/software/hive3.1.2/conf，修改hive-env.sh.template名称为 hive-env.sh。把apache-hive-3.1.2-bin.tar.gz上传到linux的/home/hadoop/software目录下。
HIVE的三种建表方式
热门推荐
weixin_44988131的博客
11-01 2万+
目录一、直接建表二、as （直接使用查询结果插入到一张新表）三、like（复制表结构） 一、直接建表 中括号里面的均为可选项 CREATE [EXTERNAL] TABLE [IF NOT EXISTS] table_name 　　[(col_name data_type [COMMENT col_comment], ...)] 　　[COMMENT table_comment] 　　[PARTITIONED BY (col_name data_type [COMMENT col_comment], ...
大数据离线分析系统，基于hadoop的hive以及sqoop的安装和配置
03-01
在`hadoop HA集群安装文档1.0.docx`中，应详细介绍了如何配置两个NameNode节点，设置JournalNodes和Zookeeper，以及如何启用和测试HA模式。这些步骤是确保Hadoop集群稳定性和容错性的基础。 接下来是Hive的安装。...
hive高可用1
08-08
Hive的部署方式主要有三种： 1. **Local/Embedded Metastore Database (Derby)**：默认的轻量级模式，元数据存储在内嵌的Derby数据库中，适合开发和测试环境。 2. **Remote Metastore Database**：元数据存储在外部...
Hive学习(一)Hive的三种搭建方式
滴水穿石的博客
11-12 1096
Hive三种搭建方式 一、Local本地（derby） 元数据库derby与工具都是在本地 只需将压缩包解压，在hive-site.xml做以下配置（将原信息删除） 注：需要将hive-site.xml.template更名为hive-site.xml mv hive-default.xml.template hive-site.xml &amp;amp;amp;lt;?xml version=&amp;amp;quot;1.0&amp;amp;quot;?&amp;amp;
Hive教程之metastore的三种模式
易水寒
02-11 993
http://www.micmiu.com/bigdata/hive/hive-metastore-config/
Hive部署
Clear的博客
08-25 473
Hive笔记 HIve 基本概念 Hive 是基于 Hadoop 的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类 SQL 查询功能 Hive 本质：将 HQL 转化成 MapReduce 程序 （1）Hive 处理的数据存储在 HDFS （2）Hive 分析数据底层的实现是 MapReduce （3）执行程序运行在 Yarn 上 Hive 架构原理 1）用户接口：Client CLI（command-line interface）、JDBC/ODBC(jdbc 访问 hive)、WEBU
hive的三种模式及配置
星空的风fly
06-24 4305
hive依赖于hadoop集群和mysql数据库，hadoop集群安装不在详述，mysql见3(3) 1、配置分布 NameNode DataNode Zookeeper DFSZKFC JournalNode hive(单用户) hive(多用户) mysql node01 1 1 ...
hive 中创建表的三种方式
u012957549的博客
12-23 1万+
官网地址：https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DDL 通常我们所使用的创建hive表有三种方式 1.create table 首先我们找到官网对创建表的描述如下： ’[]’ 表示可选，’|’ 表示几选一 CREATE [TEMPORARY] [EXTERNAL] TABLE [IF NOT EXISTS] ...
hive中创建表的三种方式：直接建表，抽取（as）建表，like建表
wyqwilliam的博客
09-08 2万+
Hive创建表的方式（默认路径/user/hive/warehouse，也可以location指定，主要针对external表）   1、使用create命令创建一个新表,带分区 CREATE TABLE `FDM_SOR.mytest_deptaddr`( `dept_no` int, `addr` string, `tel` stri...
Hive的metastore的三种部署方式；Hive的四种排序方式
祁小北de博客
07-18 950
Hive的metastore的三种部署方式;Hive的四种排序方式

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值