java客户端实现SQL查询ES

java客户端实现SQL查询ES

背景:
ES 从6.3版本之后开始支持SQL 查询,通过kibana等客户端,可以像查询MySql一样, 查询ES的index,并且支持一次可以查询多个索引,但其原理还是将SQL转成DSl来查询,如下在kibana上面利用SQL查询ES

// 通过该SQL查询
POST _xpack/sql?format=txt
{
   
	"query":"select * from testIndex"
}

将该SQL转换成DSL
POST /_sql/translate 
{
   
 "query": "select * from info"
}

但是这通过kibana这种客户端平台来查询ES, 如何在代码中利用SQL查询ES呢?
先来看一下目前Java支持的几种客户端

  1. TransportClient
  2. Java Low Level REST Client
  3. Java High Level REST Client
  4. JDBC

目前第一种方式 在ES 8.xx版本中已经废弃了, 第二方式需要自定义拼接参数,比较麻烦,第三种方式有比较丰富的API,但是无法支持直接通过SQL查询,也无法将SQL转成DSL,第四种方式的话是需要一个额外的xpack插件,但是其需要开通会员才能使用sql进行查询。
那有没有可以将SQL转换成DSL的工具呢? 通过搜索, 在github上面发现了NPLChain 提供的一个开源工具: elasticsearch-sqlgithub地址 ,其是通过TransportClient客户端连接ES及查询,最核心的就是可以将sql转换成一个queryAction对象,这个对象也就是我们通过客户端连接时需要组装的一个查询对象。
maven依赖如下:

		<dependency>
            
  • 3
    点赞
  • 8
    收藏
    觉得还不错? 一键收藏
  • 3
    评论
Elasticsearch 5.4 提供了一种称为 SQL REST API 的方式,允许你使用 SQL 语句来查询 Elasticsearch。你可以使用 Java 客户端来调用 SQL REST API,实现 SQL 查询。 以下是一个使用 Java 客户端调用 Elasticsearch SQL REST API 的示例: ```java import org.apache.http.HttpHost; import org.elasticsearch.client.RestClient; import org.elasticsearch.client.RestHighLevelClient; import org.elasticsearch.client.sniff.Sniffer; import org.elasticsearch.client.transport.TransportClient; import org.elasticsearch.common.settings.Settings; import org.elasticsearch.common.transport.TransportAddress; import org.elasticsearch.common.unit.TimeValue; import org.elasticsearch.common.xcontent.XContentBuilder; import org.elasticsearch.common.xcontent.XContentFactory; import org.elasticsearch.index.query.QueryBuilders; import org.elasticsearch.search.SearchHit; import org.elasticsearch.search.builder.SearchSourceBuilder; import org.elasticsearch.transport.client.PreBuiltTransportClient; import java.net.InetAddress; import java.util.concurrent.TimeUnit; public class ElasticsearchSqlExample { public static void main(String[] args) throws Exception { // 创建 RestClient RestClient restClient = RestClient.builder( new HttpHost("localhost", 9200, "http")) .build(); // 创建 RestHighLevelClient RestHighLevelClient client = new RestHighLevelClient(restClient); // 创建 SQL 查询 XContentBuilder builder = XContentFactory.jsonBuilder(); builder.startObject(); { builder.field("query", "SELECT * FROM my_index WHERE age > 30"); } builder.endObject(); // 创建 SearchSourceBuilder SearchSourceBuilder searchSourceBuilder = new SearchSourceBuilder(); searchSourceBuilder.query(QueryBuilders.wrapperQuery(builder.string())); // 发起查询 SearchHit[] searchHits = client.search(searchSourceBuilder.timeout(new TimeValue(60, TimeUnit.SECONDS))) .getHits().getHits(); // 输出查询结果 for (SearchHit searchHit : searchHits) { System.out.println(searchHit.getSourceAsString()); } // 关闭客户端连接 client.close(); restClient.close(); } } ``` 在这个示例中,我们首先创建了一个 RestClient,然后使用它创建了一个 RestHighLevelClient。接着,我们使用 XContentBuilder 创建了一个 SQL 查询,并将其包装在一个 SearchSourceBuilder 中。最后,我们使用 RestHighLevelClient 发起查询,并输出查询结果。 需要注意的是,为了能够使用 SQL REST API,需要在 Elasticsearch 的配置文件中启用 xpack.sql.enabled 参数。同时,SQL 查询的语法和限制与传统的 SQL 有所不同,具体可以参考 Elasticsearch 的官方文档。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值