IT云清-CSDN博客

原创 13.Elasticsearch查询语句4

本文从简单到复杂，将前面的查询关键字都用起来，并给出在mysql中的语句样式，方便对比理解。1.简单条件查询mysql:SELECT *FROM policy_fileWHERE LEVEL = '国家级'AND web_source = '浙江省人民政府'AND launch_department != '浙江省工商局'Elasticsea...

2018-05-29 17:14:31 1545

原创 413 Request Entity Too Large

使用es存储文档时，当某个字段内容过大时，会出现 413 Request Entity Too Large，堆栈信息如下：HTTP/1.1 413 Request Entity Too Large<html><head><title>413 Request Entity Too Large</title></head><b...

2018-05-28 16:16:32 3215 4

原创 "reason":"object mapping for [] tried to parse field [] as object, but found a concrete value"

使用java操作es，添加文档时，出现如下错误：[{&amp;amp;quot;type&amp;amp;quot;:&amp;amp;quot;mapper_parsing_exception&amp;amp;quot;,&amp;amp;quot;reason&amp;amp;quot;:&amp;amp;quot;object mapping for [enclosure_infor

2018-05-28 14:59:53 17960 3

转载 java IO流总结

文章来源：点击跳转Java中I/O操作主要是指使用Java进行输入，输出操作. Java所有的I/O机制都是基于数据流进行输入输出，这些数据流表示了字符或者字节数据的流动序列。数据流是一串连续不断的数据的集合，就象水管里的水流，在水管的一端一点一点地供水，而在水管的另一端看到的是一股连续不断的水流。数据写入程序可以是一段、一段地向数据流管道中写入数据，这些数据段会按先后顺序形成一个长的数据...

2018-05-26 17:32:53 261

原创 12.Elasticsearch查询关键字3

本文讲解验证查询目录: - 1._validate - 2.explain - 3.rewrite在使用正常查询时，如下：GET people/user/_search?q=age:27会返回查询结果{ &quot;took&quot;: 0, &quot;timed_out&quot;: false, &quot;_shards&quot;: { &

2018-05-25 18:59:56 1946 1

原创 11.Elasticsearch查询关键字2

本文主要讲解组和查询使用的关键字boolmustmust_notshouldfilterconstant_score 在很多时候，我们不仅仅是根据id来查询某条记录或者某个文档，我们需要进行一系列的筛选和过滤，此时，我们需要把各种条件组和起来，成为一条语句去执行，本文，就是讲如何处理此问题。目录：1.使用bool组和查询条件2.相关性得分计算方式3.filter过滤查询...

2018-05-25 16:55:26 2086

原创 Elasticsearch教程目录

↓↓↓Elasticsearch教程目录，点击直接进入文章↓↓↓，也可进入专栏：1.Elasticsearch简介2.Elasticsearch和Java交互3.Elasticsearch面向文档4.Elasticsearch索引文档5.Elasticsearch检索文档6.Elasticsearch轻量搜索7.Elasticsearch请求...

2018-05-24 21:03:26 1231

原创 10.Elasticsearch查询关键字1

本文讲解几个查询时常用的关键字：match_all 查询match 查询multi_match 查询range 查询term 查询terms 查询exists 查询和 missing 查询match_all 查询match_all 查询简单的匹配所有文档。在没有指定查询方式时，它是默认的查询：{ &quot;match_all&quot;: {}}它经常与 filter ...

2018-05-24 20:51:55 6974

转载 9.Elasticsearch查询与过滤

本文目录：过滤情况（filtering context）查询情况（query context）性能差异如何选择查询与过滤编辑Elasticsearch 使用的查询语言（DSL）拥有一套查询组件，这些组件可以以无限组合的方式进行搭配。这套组件可以在以下两种情况下使用： - 过滤情况（filtering context） - 查询情况（query context）过滤情...

2018-05-24 17:56:41 987

原创 8.Elasticsearch查询表达式Query DSL

Query DSL查询表达式(Query DSL)是一种非常灵活又富有表现力的查询语言。 Elasticsearch 使用它可以以简单的 JSON 接口来展现 Lucene 功能的绝大部分。在你的应用中，你应该用它来编写你的查询语句。它可以使你的查询语句更灵活、更精确、易读和易调试。要使用这种查询表达式，只需将查询语句传递给 query 参数：比如前面的空查询，又可以写为：G...

2018-05-24 16:58:12 2209

原创 7.Elasticsearch请求体查询

本文目录： - 请求体查询 - 空查询 - from 和size - 注意get请求请求体查询轻量搜索 —query-string search— 对于用命令行进行即席查询（ad-hoc）是非常有用的。然而，为了充分利用查询的强大功能，你应该使用请求体 search API，之所以称之为请求体查询(Full-Body Search)，因为大部分参数是通过 Http 请求体...

2018-05-24 16:56:38 994

原创 6.Elasticsearch轻量搜索

轻量搜索有两种形式的搜索 API： - 一种是 “轻量的” 查询字符串版本，要求在查询字符串中传递所有的参数 - 另一种是更完整的请求体版本，要求使用 JSON 格式和更丰富的查询表达式作为搜索语言。本文主要讲解这种轻量的搜索。查询字符串搜索非常适用于通过命令行做即席查询。例如，查询在 tweet 类型中 tweet 字段包含 elasticsearch 单词的所有文档：...

2018-05-23 17:32:04 690

原创 5.Elasticsearch检索文档

前一篇我们索引（存储）了文档，本篇我们讲解最简单的查询文档，和删除文档。1.根据id查询文档我们执行一个http get请求，指定文档的索引库，类型，id，即可返回此文档GET people/user/1返回结果为：{ "_index": "people", "_type": "user", "_id&a

2018-05-23 11:51:34 842

本文从索引文档开始，后面逐步讲解索引，搜索，聚合等概念，如果有概念不能理解，可以先照着代码操作，后面会更详细的解释。我们这里创建几个文档，用来存储user信息，在使用mysql时，一条user信息，在user表中可能是一条数据，然后这条数据中会关联其他表的id，这样多张关联表的内容，综合起来，会形成一个完整的user信息。但是在es中，我们可以把所有关于user的信息全部存在一个文档中，以us...

2018-05-23 11:34:48 739

原创 java8 集合操作

利用java8的stream，根据集合的某个属性值，给集合做排序.1.实体类要实现Comparable接口public class IndustryInfo implements Comparable&amp;amp;amp;amp;amp;amp;lt;IndustryInfo&amp;amp;amp;amp;amp;amp;gt;{ private String code; private String name; priva

2018-05-16 13:58:47 1504

原创 3.Elasticsearch面向文档

1.面向文档在应用程序中对象很少只是一个简单的键和值的列表。通常，它们拥有更复杂的数据结构，可能包括日期、地理信息、其他对象或者数组等。也许有一天你想把这些对象存储在数据库中。使用关系型数据库的行和列存储，这相当于是把一个表现力丰富的对象挤压到一个非常大的电子表格中：你必须将这个对象扁平化来适应表结构–通常一个字段&amp;gt;对应一列–而且又不得不在每次查询时重新构造对象。Elastics...

2018-05-13 12:57:26 788

原创 2.Elasticsearch和Java交互 -- java操作es

本系列主要使用java为主要语言来和Elasticsearch进行交互。1.JAVA API如果你正在使用 Java，在代码中你可以使用 Elasticsearch 内置的两个客户端：节点客户端（Node client）节点客户端作为一个非数据节点加入到本地集群中。换句话说，它本身不保存任何数据，但是它知道数据在集群中的哪个节点中，并且可以把请求转发到正确的节点。传输客户端...

2018-05-13 12:56:32 2892 1

原创 1.Elasticsearch简介

1.简介Elasticsearch 是一个分布式、可扩展、实时的搜索与数据分析引擎。建立在一个全文搜索引擎库 Apache Lucene™ 基础之上。2.和lucene的关系Lucene 仅仅只是一个库，为了充分发挥其功能，需要使用 Java 并将 Lucene 直接集成到应用程序中，使用起来非常麻烦。Elasticsearch 也是使用 Java 编写的，它的内部使用 Luc...

2018-05-13 12:55:29 908

原创 net.sf.json.JSONObject maven依赖

最后一行需要保留，有两个jdk版本的实现：json-lib-2.1-jdk13.jar和json-lib-2.1-jdk15.jar <dependency> <groupId>net.sf.json-lib</groupId> <artifactId>json-lib</art...

2018-05-12 15:36:04 78568 21

原创 MD5工具

MD5工具类import org.apache.commons.codec.digest.DigestUtils;import java.io.UnsupportedEncodingException;import java.security.SignatureException;/** * 功能：MD5签名处理核心文件，不需要修改* */public class MD5...

2018-05-10 19:22:20 536

原创 Elasticsearch中删除数据

删除文档想找个删除的api，找不到能用的，只能自己去翻译了。。。。。。delete API允许从基于其id的特定索引中删除一个JSON文档，下面的示例从twitter中删除类型为_doc的JSON文档，其id为1:DELETE /twitter/_doc/1上述删除操作的结果为:{ &quot;_shards&quot; : { &quot;total&quot; : 2, ...

2018-05-10 15:47:09 40194 3

原创 Illegal base64 character a

base64解码为文件方式不止一种，下面两种，如果一种报错，换另外一种试一下： byte[] bytes = Base64Utils.decodeFromString(base64Str); byte[] bytes1 = new BASE64Decoder().decodeBuffer(base64Str);先将base64字符串转为byte...

2018-05-10 14:54:02 15267 2

转载 Elasticsearch数据库match和term的区别

es种有两种查询模式，一种是像传递URL参数一样去传递查询语句，被称为简单搜索或查询字符串(query string)搜索，比如GET /megacorp/employee/_search //查询全部员工GET /megacorp/employee/_search?q=last_name:Smith //查询last_name为Smith的员工另外一种是通过DSL语句来进行查询，被称为DSL...

2018-05-09 19:01:44 5360 2

转载 es数据库match和term的区别

es种有两种查询模式，一种是像传递URL参数一样去传递查询语句，被称为简单搜索或查询字符串(query string)搜索，比如GET /megacorp/employee/_search //查询全部员工 GET /megacorp/employee/_search?q=last_name:Smith //查询last_name为Smith的员工另外一种是通过DSL语句来进行查询，被称...

2018-05-09 19:00:05 5131 1

原创 Spring获取配置文件常量

1.配置文件# policyFilepolicyFile.es.host=1.1.1.1policyFile.es.port=9200policyFile.es.hostname=xxxxpolicyFile.es.password=1234562.常量实体类import org.springframework.beans.factory.Initializing...

2018-05-09 10:07:15 2342

原创 java文件转二进制

本工具类提供三个方法：1.文件转为二进制数组2.文件转为二进制字符串3.二进制字符串还原为文件可当做工具类直接使用。package com.yscredit.sz.util;import org.springframework.util.FileCopyUtils;import java.io.ByteArrayOutputStream;import java.i...

2018-05-07 15:03:26 29160 14

原创 json转map

java中map和json互转工具类，注意方法示例的格式（这里是最简单的无嵌套的格式），不满足此格式的不合适：package com.yscredit.sz.util;import com.alibaba.fastjson.JSON;import org.apache.commons.collections.map.LinkedMap;import org.codehaus.jac...

2018-05-07 14:59:07 357

原创 java 巧用标识符

很多时候，巧用标识会很大的减少代码量和厘清代码逻辑；比如下面，这里的entName和code都有可能为空，也可能都不为空，但是当两entName都不为空且相等，或者当两code都不为空且相等时，才会执行代码逻辑；这个需求，如果只用if else不用标识，那处理逻辑会重复的写到不同的判断中，而用标识后，就非常简单了。示例代码如下：for(int i = 0;i < nextList.s...

2018-05-04 17:38:58 322

原创 mysql 字符串转日期

在mysql做数据库迁移时，如果数据不过程序，纯sql操作，那么将字符串转为日期格式可以使用如下方式：SELECT DATE('2017-02-11')SELECT DATE('2017/02/11')SELECT STR_TO_DATE('2015/02/25','%Y/%m/%d')SELECT STR_TO_DATE('2015-02-25','%Y-%m-%d')转换...

2018-05-04 15:01:47 16162

原创 git push 每次都需要输入用户名和密码

这个说明使用的是https的方式提交代码，建议使用ssh，git安装好后，先在本地生成sshkey，然后在git上配置一下即可。配置方式如下：再拉取代码时选择ssh的方式:这样push代码就不用用户名和密码了，免去了繁琐的输入。...

2018-05-03 23:05:07 2703

原创 python教程7--python解二元一次方程ax²+bx+c=0

1.先回忆一下ax2+bx+c=0这个一元二次方程的数学解法2.python实现在我们知道求根公式后，我们用python来实现一下：def my_quadratic(a,b,c): if not isinstance(a,(int,float)): raise TypeError('a is not a number,please try again...

2018-05-02 14:02:47 11960 5

原创 python教程5--python中字符串拼接的几种方式

本文主要讲解在python中集中常见的拼接字符串的方法# -*- coding: utf-8 -*-__author__ = 'momo''字符串拼接'# 1.用+拼接print('aa'+"好的") # aa好的# print('aa'+34) # TypeError: must be str, not int# 2.用,拼接 ------>,处会多出...

2018-05-02 13:08:32 313

原创 python教程6--自定义函数，数据类型转换，解方程

本文主要讲解点如下：简单函数数据类型转换空函数自定义绝对值函数自定义函数检查参数类型函数返回多个值求解ax2 + bx + c = 0 的根具体代码如下：'函数相关'__author__ = 'momo'import sysimport math# 简单函数print(abs(-12))print(max(1,4,34,-23))prin...

2018-05-02 13:04:44 997

原创 python教程4--判断、循环、range()函数

1.if else 判断if 4 > 5: print("aa")else: print("bb")# bb# elif 是else if 的意思，和Java一样a = 5if a == 3: print('a是3')elif a == 4: print('a是4')elif a == 5: print('a是5')else...

2018-05-02 12:46:27 1033

原创 python教程3--list、tuple、dict、set

1.listlist是列表，是一种有序集合，使用方法如下：# 1.新建listnames = ['张三','李四','王五','赵六']list2 = ['张三',True,4]list3 = ['张三',55,list2]# 打印结果如下，发现，list集合可以随便玩儿，类型不同可以，嵌套也可以# ['张三', '李四', '王五', '赵六']print(name...

2018-05-02 12:45:48 560

原创 python教程2--数据类型、变量、常量、除法

1.数据类型1.1整数Python可以处理任意大小的整数，包括负整数。Java中的整数是有范围限制的，比如int的范围限制在-2147483648-2147483647之间。1.2浮点数浮点数也就是小数，如果数字很大，可以把10用e替代，1.23x109就是1.23e9，或者12.3e8，0.000017可以写成1.7e-5；整数计算时精确的，小数计算有可能有四舍五入的误差...

2018-05-02 12:45:07 655 1

原创 python教程1--python简介

本系列，适合有开发经验的程序员学习（尤其是java程序员），由于假设你有开发基础，所以多数情形下，简单的东西能用代码的地方就很少用大篇幅的文字；学习语言重点在于多敲代码，看概念远没有多敲学的快；建议对着教程边看边敲。1.python是什么？Python是用来编写应用程序的高级编程语言。高级编程语言通常都会提供一个比较完善的基础代码库，让你能直接调用，python的基础代码库覆盖了网络、文件...

2018-05-02 12:43:57 873

原创 python中字符串拼接

记录一下python中字符串拼接的常见用法#后为注释或者打印结果# -*- coding: utf-8 -*-__author__ = 'lightClouds917''字符串拼接'# 1.用+拼接print('aa'+"好的") # aa好的# print('aa'+34) # TypeError: must be str, not int# 2.用,拼接 ...

2018-05-02 12:00:06 274

原创复杂sql

这里记录一条mybatis中的sql，涉及以下几点：1.foreach2.大于等于号，小于号3.foreach遍历4.模糊匹配5.and 和or 的复杂拼接6.一个巧妙的用法：1=0 <select id="findByPageForEntFile" resultMap="resMap2" statementType="STATEMENT"> sel...

2018-04-27 22:14:45 310

原创 mybatis 传入多个list

mybatis传入多个list集合做参数，很多文章的介绍都是不能实现的，千篇一律的复制，有很大的误导性，这里说一下如何实现：这里建议你传递对象过来，比如Person对象，里面加入List list1; List list2;….这样，把对象传到mapper.xml中时，取法如下：dao.javaList&lt;User&gt; find(@Param("person")Pers...

2018-04-27 21:30:22 10380 5

空空如也

空空如也