springboot集成hive2的问题

最新推荐文章于 2024-04-18 07:02:53 发布
最新推荐文章于 2024-04-18 07:02:53 发布
阅读量6k 收藏
点赞数
分类专栏： springboot 文章标签： springboot hive
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_37611100/article/details/80678864
版权
method not support的问题，比较蛋疼。由于springboot2.0以后引入了新的连接池，变成了hikaricp，网上查了一下这个连接池号称是java性能最好的连接池。但是和hive-jdbc的集成不是很好，如果你的hive版本在2.0以上，不会出现这个问题，但是现在大部分的hive版本都是2.0以下的。解决的办法。1.小项目不使用连接池，直接@Bean(name = "hiveJ...
摘要由CSDN通过智能技术生成

method not support的问题，比较蛋疼。

由于springboot2.0以后引入了新的连接池，变成了hikaricp，网上查了一下这个连接池号称是java性能最好的连接池。

但是和hive-jdbc的集成不是很好，如果你的hive版本在2.0以上，不会出现这个问题，但是现在大部分的hive版本都是2.0以下的。

解决的办法。

1.小项目不使用连接池，直接

@Bean(name = "hiveJdbcTemplate")
JdbcTemplate getHiveJdbcTemplate(){
    DataSource hiveDataSource = new SimpleDriverDataSource(new HiveDriver(), hiveUrl,hiveUser
最低0.47元/天 解锁文章
jack_kone
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Springboot2 hive2 jdbc连接
Lincoln 的专栏
03-25 1579
前言 这段时间学习大数据应用，对于Hive server2 的服务，用beeline可以通过CLI来执行一些查询，但是毕竟是做业务，所以还是会牵扯到用Spring boot 来读取 hive2 中的数据，进行CRUD操作嘛。 文章目录前言依赖配置 yml创建datasource使用JdbcTemplate 依赖 pom.xml <dependency> <groupId&...
Hive2.x 版本的安装及配置
cds86333774的博客
04-12 7656
博主学习Hadoop学习到Hive，一开始跟着资料去安装Hive 1.x一点问题也没有，方便快捷啊，但是看了一下官方文档，上面好像说Hive 2.0修复了很多bug，那么我想，我还是用Hive2.0好了。于是我开始按照原来的流程配置Hive2.0，遇到了各种问题，而且由于版本太新，国内网站上的解决方案基本上没有用。查阅各种资料，现在终于配置好了。所以写这篇博文分享，希望减少跟我一样的新手在使用Hiv
spring boot: 使用MyBatis从hive中读取数据
最新发布
amadeus_liu2的博客
04-18 527
二、添加mybatis starter和hive依赖。五、定义controller,注入mapper并使用。启动hiveserver2。四、定义mapper。
2.29. Spring boot with Apache Hive
weixin_34187822的博客
12-26 69
2.29.1.Maven <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-jdbc</artifactId> </...
# SpringBoot Jdbc连接HIve
不积跬步，无以至千里；不积小流，无以成江海
02-05 1708
SpringBoot Jdbc连接HIve Error: Could not open client transport with JDBC Uri: jdbc:hive2://192.168.159.131:10000: 这个是因为hive中的hiveServer2没有启动起来,启动的命令是: hive --service hiveserver2 @Bean方式配置Hive数据库 1.项目引...
Hive2.0安装完整版——Hive2.3.4
@羲凡—只为更好的活着
01-16 7892
@羲凡——只为了更好的活着 Hive安装完整版——Hive2.3.4 Hive是大数据生态圈中最常用的数据仓库，也是有hadoop集群的公司的必备。所以hive安装和使用也是大数据开发或运维人员都必须掌握的。hive的安装很简单，而且各版本的安装都非常类似，完全可以套用。此文中选择Hive2.3.4作为示范！ 一、下载对应的安装包 1.下载mysql驱动 下载地址如下 http://central...
SpringBoot整合hive-jdbc示例
08-19
hive.jdbc.url=jdbc:hive2://localhost:10000/default hive.jdbc.driver=com.cloudera.hive.jdbc41.HS2Driver hive.jdbc.username=hive hive.jdbc.password=root ``` 其中，`url`指向Hive Server2的地址，`driver`...
spring-boot集成mybtis+druid实现hive/mysql多数据源切换
09-28
2. `application.properties`/`application.yml`：Spring Boot的配置文件，配置两个数据源的信息。 3. `src/main/resources`：包含MyBatis的配置文件`mybatis-config.xml`，以及各个Mapper接口的XML文件。 4. `src/...
SpringBoot2 整合 ClickHouse数据库案例解析
08-25
主要介绍了SpringBoot2 整合 ClickHouse数据库案例解析,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
springboot集成impala(包含yml、impala配置类、pom.xml、impala jar)
09-18
1. **SpringBoot集成**: SpringBoot是基于Spring框架的一个轻量级开发工具，它简化了创建独立、生产级别的基于Spring的应用程序。集成Impala意味着我们可以直接在SpringBoot应用中执行SQL查询，访问存储在Impala的...
springboot集成phoenix/presto/tidb/redis各模式等组件demo.zip
04-14
此springboot--demo集成了以下组件，demo如无法运行、或缺失相应组件demo无法调用可以私聊52fighting https://blog.csdn.net/qq_25073261/article/details/105517616 1. netty-websocket 2. spring-boot-admin-...
springboot+mybatisplus+druid+hive+mysql.zip
10-26
在【压缩包子文件的文件名称列表】中，我们看到的"hive-demo-master"可能是一个包含Hive使用示例的项目，它可能包含配置文件、Java代码、测试脚本等，用于演示如何在SpringBoot项目中集成Hive，进行数据的读写操作。...
springboot+mybatis多数据源集成
08-17
springboot + mybatis + myql 多数据源
springboot demo 整合mybaits、已配置好
01-14
SpringBoot 是一个由 Pivotal 团队开发的框架，旨在简化 ...这个项目应该适合初学者参考和学习，以便快速上手 SpringBoot 和 MyBatis 的集成。在实际开发中，还可以根据需求添加更多功能，如事务管理、分页插件等。
springboot整合spark连接远程服务计算框架使用standAlone模式
08-15
本文将深入探讨如何将Spring Boot与Spark集成，并使用Standalone模式来实现远程服务计算。 首先，我们需要了解Spark Standalone模式。这是Spark自带的一种资源管理器，可以独立于其他集群管理器（如YARN或Mesos）...
springboot+mybatis+impala/mysql整合Demo
05-07
springboot+mybatis+impala/mysql整合Demo ， 内嵌PageHelper插件已整合，需要根据pom.xml中的备注操作即可使用mysql和PageHelper, impala 不支持PageHelper插件
分享一个 hive on spark 模式下使用 HikariCP 数据库连接池造成的资源泄露问题
明哥的IT随笔
03-09 1002
最近在针对某系统进行性能优化时，发现了一个hive on spark 模式下使用 HikariCP 数据库连接池造成的资源泄露问题，该问题具有普适性，故特地拿出来跟大家分享下
springboot集成hive，使用druid连接池
经验分享
05-13 3996
hive基础知识 #后台启动 >bin/hiveserver2 & #进入beeline >bin/beeline #连接ip是部署hive的服务器，端口默认 10000；可在conf/hive-site.xml修改hive.server2.thrift.port属性值 !connect jdbc:hive2://ip:端口 >输入用户名 默认空 >输入密码 默认空 #连接成功后，即可看到Beeline version 2.3.4 by Apache Hive当前..
dbType not support
dong__xue的博客
04-28 4004
检查 数据库 四要素配置的名称 检查依赖的版本 最后这个异常是WallFilter打印的，WallFilter是防火墙，需要禁止： #spring.datasource.dynamic.druid.filters=stat,wall,slf4j spring.datasource.dynamic.druid.filters=stat,slf4j ...
springboot 集成 Hive
07-28
要在Spring Boot中集成Hive，您需要遵循以下步骤： 1. 添加Hive依赖：在您的`pom.xml`文件中添加以下依赖： ```xml <dependency> <groupId>org.apache.hive</groupId> <artifactId>hive-jdbc</artifactId> <version>3.1.2</version> </dependency> ``` 2. 配置Hive连接：在`application.properties`或`application.yml`文件中添加Hive连接配置，例如： ```properties spring.datasource.url=jdbc:hive2://localhost:10000/default spring.datasource.username=hive spring.datasource.password=password ``` 3. 创建HiveTemplate Bean：在您的配置类中创建HiveTemplate Bean，例如： ```java @Configuration public class HiveConfig { @Value("${spring.datasource.url}") private String hiveUrl; @Value("${spring.datasource.username}") private String hiveUsername; @Value("${spring.datasource.password}") private String hivePassword; @Bean public HiveTemplate hiveTemplate() { return new HiveTemplate(new JdbcTemplate(hiveDataSource())); } @Bean public DataSource hiveDataSource() { DriverManagerDataSource dataSource = new DriverManagerDataSource(); dataSource.setDriverClassName("org.apache.hive.jdbc.HiveDriver"); dataSource.setUrl(hiveUrl); dataSource.setUsername(hiveUsername); dataSource.setPassword(hivePassword); return dataSource; } } ``` 4. 使用HiveTemplate执行查询：在您的服务类中注入HiveTemplate，并使用它执行Hive查询，例如： ```java @Service public class HiveService { private final HiveTemplate hiveTemplate; public HiveService(HiveTemplate hiveTemplate) { this.hiveTemplate = hiveTemplate; } public List<Map<String, Object>> executeHiveQuery(String query) { return hiveTemplate.queryForList(query); } } ``` 这样，您就可以在Spring Boot应用程序中集成Hive，并使用HiveTemplate执行Hive查询了。请确保在运行应用程序之前，您已经启动了Hive服务。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值