- 博客(182)
- 收藏
- 关注
RSS订阅原创 ElasticSearch 设置-配置（一）发现和集群形成设置
文章目录配置ElasticSearch发现和集群形成设置字段数据缓存设置缓存大小监控字段数据配置ElasticSearch发现和集群形成设置发现和集群形成受以下设置影响discovery.seed_hosts：提供集群中符合主节点条件的节点列表。也可以是以逗号分隔的单个字符串。每个节点都是host:port或者host格式。host是由DNS解析出来的任意主机名称。IPV6必须用方括号括起来。如果一个主机名通过DNS解析出来多个地址，ElasticSearch会使用所有被解析出来的地址。d
2021-08-16 16:10:30
2035
原创 ElasticSearch 设置（三）全集群重启和滚动重启
文章目录全集群重启和滚动重启全集群重启滚动重启全集群重启和滚动重启可能存在您想要执行全集群重启或滚动重启的情况。在全集群重启的情况下，您关闭并重启集群中的所有节点，而在滚动重启的情况下，您一次只关闭一个节点，因此服务不会中断。全集群重启关闭分片分配当您关闭一个数据节点时，分配进程会等待index.unassigned.node_left.delayed_timeout(默认为1分钟)，然后开始将该节点上的分片复制到集群中的其他节点，这可能涉及大量的I/O。由于节点将很快重启，所以这个I/O是不
2021-08-16 16:08:18
709
原创 ElasticSearch 设置（二）在集群中添加和删除节点
文章目录在集群中添加和删除节点符合主节点的节点添加符合主节点的节点移除符合主节点的节点在集群中添加和删除节点当您启动Elasticsearch实例时，您正在启动一个节点。Elasticsearch集群是一组具有相同cluster.name属性的节点。当节点加入或离开集群时，集群会自动重新组织自己，以便在可用节点之间均匀地分布数据。如果您正在运行单个Elasticsearch实例，则您拥有一个节点集群。所有主分片驻留在单个节点上。不能分配复制分片，因此集群状态保持为黄色。集群功能完整，但在发生故障时存在
2021-08-16 16:07:40
1845
原创 ElasticSearch 设置（一）发现和集群形成
文章目录发现和集群形成发现种子节点提供者基于配置的种子主机提供者基于文件的种子主机提供者基于法定人数的选举主节点的选举投票配置偶数个符合主节点的节点设置初始投票配置引导一个集群选择集群名称发布集群状态集群故障检测发现和集群形成发现发现是集群形成模块找到其他节点以形成集群的过程。当您启动Elasticsearch节点时，或当节点认为主节点出现故障时，此过程将运行，并持续到找到主节点或选择新的主节点为止。这个过程从一个或多个种子主机提供程序的种子地址列表开始，以及最后已知集群中任何符合主节点的地址。这个
2021-08-16 16:06:50
956
原创 MySQL8安全指南之账号控制与账户管理：使用部分撤销的权限限制
文章目录使用部分撤销的权限限制使用部分撤销使用部分撤销的权限限制使用部分撤销partial_revokes 系统变量控制是否可以对帐户设置权限限制。默认情况下，partial_revokes 被禁用，尝试部分撤销全局权限会产生错误：mysql> CREATE USER u1;mysql> GRANT SELECT, INSERT ON *.* TO u1;mysql> REVOKE INSERT ON world.* FROM u1;ERROR 1141 (42000): T
2021-07-30 10:12:00
356
原创 MySQL8安全指南之账号控制与账户管理：账户类型
文章目录账户类型系统和常规账户受 SYSTEM_USER 权限影响的操作系统会话和普通会话保护系统帐户免受常规帐户的操作账户类型从MySQL 8.0.16开始，MySQL引入了基于 SYSTEM_USER 用户权限的用户帐户类别概念。系统和常规账户MySQL 引入了用户帐户类别的概念，根据是否具有 SYSTEM_USER 权限来区分系统用户和普通用户：具有 SYSTEM_USER 权限的用户是系统用户。没有 SYSTEM_USER 权限的用户是普通用户。受 SYSTEM_USER 权限影响
2021-07-30 10:11:10
428
原创 MySQL8安全指南之账号控制与账户管理：使用角色
文章目录使用角色创建角色并为其授予权限定义强制性角色检查角色权限激活角色撤销角色或角色权限删除角色使用角色MySQL 角色是一个命名的权限集合。与用户帐户一样，角色也可以被授予或撤消权限。用户帐户可以被授予角色，角色将授予帐户与每个角色关联的权限。这允许将一组权限分配给帐户，并提供了授予单独权限的方便替代方案。以下列表总结了 MySQL 提供的角色管理功能：CREATE ROLE 和 DROP ROLE 创建和删除角色。GRANT 和 REVOKE 为账户和角色分配权限和撤销权限S
2021-07-30 10:10:20
1090
原创 MySQL8安全指南之账号控制与账户管理：预留账户
文章目录预留账户预留账户MySQL安装过程中需要初始化数据目录。在数据目录初始化过程中，MySQL创建的用户帐户应该被认为是保留的:'root'@'localhost：用于管理目的。这个账号拥有所有权限，是一个系统账号，可以进行任何操作。严格来说，这个帐户名不是保留的，因为某些安装将 root 帐户重命名为其他名称，以避免暴露。'mysql.sys'@'localhost'：用作sys schema对象的DEFINER。使用mysql.sys帐户可以避免DBA重命名或删除根帐户时出现的问题。该帐户
2021-07-30 10:09:45
298
原创 MySQL8安全指南之账号控制与账户管理：添加帐户、分配权限、删除帐户
文章目录添加帐户、分配权限、删除帐户创建帐户和授予权限检查帐户权限和属性撤销账户权限删除帐户添加帐户、分配权限、删除帐户要管理 MySQL 帐户，请使用用于该目的的 SQL 语句：CREATE USER 和 DROP USER 创建和删除帐户。GRANT 和 REVOKE 为帐户分配权限和撤销权限。SHOW GRANTS 显示帐户权限分配。创建帐户的另一个选择是使用GUI工具MySQL Workbench。此外，还有一些第三方程序提供MySQL帐户管理功能。phpMyAdmin就
2021-07-30 10:09:06
535
原创 MySQL8安全指南之账号控制与账户管理：访问控制第一阶段_请求验证
文章目录访问控制第一阶段_请求验证访问控制第一阶段_请求验证服务器接收连接之后，开始进入第二阶段的访问控制。对于您通过连接发出的每个请求，服务器会确定您要执行的操作，然后检查您的权限是否足够。这就是授权表中的权限列发挥作用的地方。这些权限可以来自user、global_grants、db、tables_priv、columns_priv或procs_priv 中的任何表。user 和 global_grants 表授予全局权限。这些表中的行指示在全局基础上应用的帐户权限。例如，如果user表授予您 D
2021-07-30 10:08:10
154
原创 MySQL8安全指南之账号控制与账户管理：访问控制第一阶段_连接验证
文章目录访问控制第一阶段_连接验证访问控制第一阶段_连接验证当你尝试访问MySQL服务器的时候，服务器根据这些条件来控制接收或者拒绝连接。您的身份以及您是否可以通过提供适当的凭据来验证它。您的帐户是否被锁定或解锁。服务器首先检查凭据，然后是帐户锁定状态。任一步骤的失败都会导致服务器完全拒绝您的访问。否则，服务器接受连接，然后进入第 2 阶段并等待请求。服务器使用用户表中的列进行执行身份和凭据检查，仅在满足以下条件时才接受连接：客户端主机名和用户名与某些用户表行中的Host和Use
2021-07-30 10:07:21
241
原创 MySQL8安全指南之账号控制与账户管理：指定角色名称
账号控制与账户管理指定角色名称MySQL 角色名称是指角色，角色是权限集合。有关角色使用示例，请参阅Using Roles。角色名的语法和语义与帐户名相似；正如存储在授权表中一样，它们与帐户名具有相同的属性，这些属性在授权表范围列属性中进行了描述。角色名称在以下方面与帐户名称不同：角色名称的用户部分不能为空。因此，没有类似于’匿名用户’概念的’匿名角色’。对于帐户名，省略角色名的主机部分会导致主机部分为'%'。但与帐户名中的’%'不同，角色名中主机部分的'%'没有通配符属性。例如，对于角
2021-07-30 10:06:24
193
原创 MySQL8安全指南之账号控制与账户管理：指定账户名称
文章目录账号控制与账户管理指定账户名称账号控制与账户管理指定账户名称MySQL帐户名由一个用户名和一个主机名组成，可以为从不同主机连接的具有相同用户名的用户创建不同的帐户。本节介绍帐户名的语法，包括特殊值和通配符规则。在大多数方面，帐户名称与 MySQL 角色名称相似，但在Specifying Role Name中的描述了一些差异。帐户名称出现在 CREATE USER、GRANT 和 SET PASSWORD 等 SQL 语句中，并遵循以下规则：帐户名称语法是'user_name'@'ho
2021-07-30 10:05:25
407
原创 MySQL8安全指南之账号控制与账户管理：权限表
文章目录账号控制与账户管理权限表授予表概述用户和数据库授权表table_priv 和 columns_priv 授权表procs_priv 授权表proxies_priv 授权表global_grants 授权表default_roles 授权表password_history 授权表授权表范围列属性授权表权限列属性授予表并发指定账户名称账号控制与账户管理权限表mysql数据库中包含了一些权限表，这些表包含了有关用户账户以及其拥有的权限信息。本节将描述这些表。关于系统数据库中其他表的信息，请参见The
2021-07-30 10:04:10
1286
原创 MySQL8安全指南之账号控制与账户管理
账号控制与账户管理账户用户名和密码MySQL将账户存储在mysql系统数据库中的user表中。账户还可能具有身份验证凭据，例如密码。凭据由帐户身份验证插件处理，MySQL支持多种认证插件。其中一些使用内部认证方法，而另一些使用外部认证方法来启用认证。更多信息请查看 Pluggable Authentication.MySQL用户和密码的使用与操作系统用户和密码的使用有几个区别：用于MySQL身份认证的账户与登录Windows或者Unix系统的用户名无关。在 Unix 上，默认情况下，大多数 M
2021-07-23 18:42:21
1611
原创 MySQL8安全指南之一般安全问题
文章目录一般安全问题安全指南保护密码安全终端用户密码安全指南管理员密码安全指南密码和日志使MySQL免受攻击mysqld安全相关的选项和变量如何以普通用户身份运行 MySQLLOAD DATA LOCAL 的安全注意事项启用或禁用本地数据加载功能限制允许本地数据加载的文件MySQL Shell 和本地数据加载一般安全问题安全指南在连接到Internet的计算机上使用MySQL，使用者应该阅读本节以避免常见的安全错误。在讨论安全性时，有必要充分考虑保护整个服务器主机(不仅仅是MySQL服务器)从而免受
2021-07-21 19:11:08
756
1
原创 ElasticSearch Aggregation(八)
文章目录ElasticSearch Aggregation(八)管道聚合cumulative sum聚合语法Derivative 聚合extended stats bucket聚合语法最大桶聚合语法最小桶聚合moving function聚合语法自定义用户脚本内置函数Moving percentiles聚合语法百分位桶聚合语法stats bucket聚合语法sum bucket聚合语法ElasticSearch Aggregation(八)管道聚合cumulative sum聚合一种父管道聚合，它计
2021-07-20 17:42:28
515
原创 ElasticSearch Aggregation(七)
文章目录ElasticSearch Aggregation(七)管道聚合average bucket聚合语法参数响应体例子bucket script聚合语法bucket selector聚合语法bucket sort聚合语法截断而不进行排序cumulative cardinality聚合语法增量累积基数聚合ElasticSearch Aggregation(七)管道聚合管道聚合作用于其他聚合后的结果上，而不是作用于文档集合。有很多不同类型的管道聚合，每一种都会根据其他聚合数据计算出不同的信息，但是这些
2021-07-20 15:00:58
671
1
原创 ElasticSearch Aggregation(六)
文章目录ElasticSearch Aggregation(六)指标聚合Percentiles脚本rate聚合语法使用脚本聚合stats聚合脚本缺失值string stats聚合字符分布脚本缺失值sum聚合Top metrics 聚合size例子ElasticSearch Aggregation(六)指标聚合Percentiles百分比聚合。一种多值指标聚合，对从聚合文档中提取的数值计算一个或多个百分比。这些值可以从文档中的特定数字或直方图字段中提取。当检索到一系列百分位数时，它们可用于估计数据分
2021-07-19 15:36:26
290
原创 ElasticSearch Aggregation(五)
文章目录ElasticSearch Aggregation(五)指标聚合avg缺失值直方图字段Cardinality聚合精确控制Extended stats 聚合Geo-Bounds聚合在`geo_shape`字段上聚合边界框Geo-centroid聚合在`geo_shape`字段上聚合边界框Matrix stats 聚合max聚合脚本缺失值直方图字段min聚合Percentile ranks聚合keyed response脚本缺失值ElasticSearch Aggregation(五)指标聚合这个
2021-07-16 17:02:45
271
3
原创 ElasticSearch Aggregation(四)
文章目录ElasticSearch Aggregation(四)桶聚合Geo-distanceglobal聚合histogram聚合最小文档个数IP范围聚合缺失聚合mutil terms聚合聚合参数脚本缺失值混合字段类型子查询和排序嵌套聚合ElasticSearch Aggregation(四)桶聚合Geo-distance地理距离聚合。工作在geo_point类型字段的多桶聚合。在概念上与range聚合非常相似。用户可以定义一个源点和一组距离范围内的桶。这个聚合会计算源点到每个文档的距离，并且根据
2021-07-16 13:44:53
524
2
原创 ElasticSearch Aggregation(三)
文章目录ElasticSearch Aggregation(三)桶聚合date histogram聚合日历间隔日历间隔例子固定间隔固定间隔例子keyskeyed response脚本缺失值排序date range聚合缺失值keyed responsefilter聚合使用顶级`query`来限制所有的聚合在多个过滤器上使用`filters`filters聚合匿名过滤器Other桶ElasticSearch Aggregation(三)桶聚合date histogram聚合日期直方图聚合。这date h
2021-07-15 11:16:54
1133
1
原创 ElasticSearch Aggregation(二)
文章目录ElasticSearch Aggregation(二)桶聚合Composite 聚合值的来源termshistogramdate histogramformat时区offset混合不同的值源排序缺少桶大小分页提前终止ElasticSearch Aggregation(二)桶聚合Bucket聚合不像metrics聚合那样计算字段上的指标，而是创建文档的Bucket。每个bucket都与一个标准（取决于聚合类型）相关联，该标准确定当前上下文中的文档是否“落入”其中。换句话说，bucket有效地定
2021-07-14 17:23:48
347
原创 ElasticSearch Aggregation(一)
文章目录ElasticSearch Aggregation(一)运行一个聚合修改聚合的范围只返回聚合结果运行多个聚合运行子聚合添加自定义元数据ElasticSearch Aggregation(一)聚合将您的数据汇总为指标、统计数据或者其他信息。聚合操作可以回到你的以下问题：我的网站的平均加载时间是多少？根据交易量，谁是我最有价值的客户？什么会被视为我的网络上的大文件？每个产品类别中有多少产品？ElasticSearch将聚合分为以下三类：指标聚合，例如总和、平均值等桶聚合，根据字段
2021-07-12 18:13:08
277
1
原创 ElasticSearch Query DSL(六)
文章目录ElasticSearch Query DSL(六)Match All查询术语级别的查询exists查询请求例子：exists顶级参数设置查找缺少索引值的文档fuzzy模糊查询查询例子使用高级参数的示例fuzz的顶级参数``参数ID查询前缀查询请求例子prefix顶级参数``参数加速前缀查询范围查询请求例子：rang的顶级参数``参数在`text`和`keyword`上运行`range`查询在`date`字段上运行`range`查询正则查询请求例子regexp顶级参数``参数term询请求例子ter
2021-07-09 12:11:08
410
2
原创 ElasticSearch Query DSL(五)
文章目录ElasticSearch Query DSL(五)连接查询嵌套查询查询例子<`nested>`顶级参数多级嵌套查询has child查询查询例子排序has parent查询查询例子排序parent ID查询查询例子ElasticSearch Query DSL(五)连接查询在像ElasticSearch这样的分布式搜索引擎上执行完整的SQL连接查询是非常昂贵的。相反ElasticSearch提供了两种形式的连接查询，这样的查询被设计用来水平扩展的。嵌套查询：文档可能包含nes
2021-07-08 17:05:42
339
原创 ElasticSearch Query DSL(四)
文章目录ElasticSearch Query DSL(四)地理查询地理距离查询例子形状查询内联形状定义预索引形状空间关系ElasticSearch Query DSL(四)地理查询地理距离查询查找与中心点的指定距离内具有地理点的文档。一个地理位置点方圆几公里内的所有文档。例子假设以下文档被索引：curl -X PUT "localhost:9200/my_locations?pretty" -H 'Content-Type: application/json' -d'{ "mappin
2021-07-08 14:43:05
135
原创 ElasticSearch Query DSL(三)
文章目录ElasticSearch Query DSL(三)地理查询地理边界框查询示例接受的格式经纬度属性方式经纬度数组方式：经纬度字符串：WKT方式：GeoHash方式：定点每个文档多个位置点类型忽略未映射精度注意事项ElasticSearch Query DSL(三)地理查询地理边界框查询该查询用于在指定矩形的地理边框内搜索指定地理点的文档。匹配geo_point和geo_shape相交的点的文档。示例假设以下文档以被索引：curl -X PUT "localhost:9200/my_lo
2021-07-07 20:04:34
190
2
原创 ElasticSearch Query DSL(二)
文章目录ElasticSearch Query DSL(二)多匹配查询`field`和字段的提升`mutil_match`查询类型`best_fields``most_fields`phrase 和phrase_prefix简单字符串查询请求例子simple_query_string的顶级参数笔记简单查询字符串的语法限制运算符在fields参数中使用通配符和字段提升ElasticSearch Query DSL(二)多匹配查询mutil_mactch匹配建立在match query之上以允许多匹配查询
2021-07-07 19:34:36
306
原创 ElasticSearch Query DSL(一)
文章目录ElasticSearch Query DSL(一)查询和过滤器上下文相关性分数查询上下文过滤器上下文查询和过滤器上下文使用示例复合查询Boolean查询使用`minimum_should_match`使用`bool.filter`计算分数提升查询请求例子`boosting`的顶级参数常量得分查询全文查询间隔查询match参数all_of参数any_of参数filter参数匹配查询match的顶级参数field参数短请求例子匹配布尔前缀查询参数匹配短语查询组合字段字段提升ElasticSearch
2021-07-07 17:09:04
273
原创 ElasticSearch检索你的数据(七）
文章目录ElasticSearch检索你的数据(七）对搜索结果进行排序排序值排序模型使用排序模型的例子排序数值字段ElasticSearch检索你的数据(七）对搜索结果进行排序允许你在字段上添加一种或者多种排序。每种排序也可以颠倒。排序是在每个字段级别上定义的，特殊字段_score按照分数排序，_doc按照索引顺序排序。假设以下索引映射：curl -X PUT "localhost:9200/my-index-000001?pretty" -H 'Content-Type: application
2021-07-07 10:49:29
157
原创 ElasticSearch检索你的数据(六）
文章目录ElasticSearch检索你的数据(六）搜索模板创建一个搜索模板验证一个搜索模板运行一个模板搜索运行多个模板搜索获取一个搜索模板删除搜索模板设置默认值URL编码字符串连接值转换JSON使用条件ElasticSearch检索你的数据(六）搜索模板搜索模板存储了运行不同变量的查询模板。如果你使用ElasticSearch作为查询后端，你可以将来自搜索栏的用户输入传递给搜索模板的变量参数。这可以让你在不公开ElasticSearch查询语法的情况下来运行查询。如果自定义的应用使用了Elasti
2021-07-06 18:32:21
269
原创 ElasticSearch检索你的数据(五）
文章目录ElasticSearch检索你的数据(五）搜索多个索引索引提升搜索分片路由自适应副本选择设置偏好使用路由值搜索的并行性和并发性ElasticSearch检索你的数据(五）搜索多个索引在额数据流上执行查询，可以在搜索请求API上增加以逗号分隔的索引名称。以下是查询my-index-000001 和my-index-00000索引：curl -X GET "localhost:9200/my-index-000001,my-index-000002/_search?pretty" -H 'C
2021-07-06 17:46:16
590
原创 ElasticSearch检索你的数据(四）
文章目录ElasticSearch检索你的数据(四）检索选中的字段filed option搜索指定的字段响应总是返回一个数组检索嵌套字段提取未映射的字段`_source`选项跨集群搜索支持的API跨集群所搜例子远程集群设置在单独远程集群上执行搜索在多个远程集群上执行搜索跳过无效集群嗅探模式下选择网关和种子节点跨集群搜索怎么处理网络延迟`Minimize network roundtrips``Don’t minimize network roundtripsedit`ElasticSearch检索你的数据
2021-07-06 11:25:59
747
原创 ElasticSearch检索你的数据(三）
文章目录ElasticSearch检索你的数据(三）近乎实时查询分页查询Search After滚动检索结果获取内部记录(`hits`)选项嵌套内部hits嵌套内部hits和`_source`内部hits和嵌套对象字段的分层级别父子内部`hits`ElasticSearch检索你的数据(三）近乎实时查询根据文档和索引概述表明，当存储文档到ElasticSearch中，会被索引并且可以近乎实时的查询（1s内）。什么是近乎实时查询呢？ElasticSearch是基于Lucene的Java库的，并引入了每
2021-07-05 15:56:13
351
原创 ElasticSearch检索你的数据(二）
文章目录ElasticSearch检索你的数据(二）高亮显示统一高亮`Plain`高亮`Fast vector` 高亮覆盖全局设置指定高亮查询设置高亮类型配置高亮标签高亮`source`高亮所有字段合并多个匹配的字段明确高亮字段顺序控制高亮片段指定`plain`高亮器的片段器高亮器内部工作原理如何将文本分解为片段如何发现好的片段如何高亮片段中的查询术语ElasticSearch检索你的数据(二）高亮显示高亮显示可以让你在检索的结果中获取高亮的代码片段，因此你能向用户展示查询匹配到的数据。当你请求高亮的
2021-07-02 17:49:07
382
2
原创 ElasticSearch检索你的数据(一)
文章目录ElasticSearch检索你的数据(一)检索你的数据运行一个检索定义只存在查询中的字段通用的检索选项Query DSLAggregations检索多个数据流和索引分页你的结果检索选定的字段排序检索结果运行异步查询检索超时检索取消跟踪总记录数快速检查匹配文档过滤检索结果Post FilterElasticSearch检索你的数据(一)检索你的数据检索查询是针对ElasticSearch上的数据流或者索引数据信息的一个请求。你可以把查询看做是一个问题，以ElasticSearch理解的方式编
2021-07-01 17:08:00
765
原创 ElasticSearch文本分析(三)
文章目录ElasticSearch文本分析(三)分词过滤器撇号（`'`）分词过滤器示例添加到分析上经典分词过滤器示例添加到分析器上条件分词过滤器示例配置参数自定义和增加到分析器上Delimited payload 分词过滤器示例添加到分析器上配置自定义和添加分析器上返回存储的有效负载`edge n-gram`分词过滤器实例添加到分析器自定义Elision分词过滤器示例添加到分析器配置参数自定义指纹分词过滤器示例添加到分析器中配置参数自定义保留类型分词过滤器包含的示例不包含的示例配置参数自定义和添加到分析器保
2021-07-01 11:50:52
391
原创 ElasticSearch文本分析(二)
文章目录ElasticSearch文本分析(二)分词器参考字符组分词器配置例子Edge n-gram 分词器例子配置`max_gram`参数的限制配置示例`keyword`分词器例子结合分词过滤器LowerCase分词器例子路径层次分词器例子配置配置示例详细例子模式分词器示例配置配置示例简单的模式匹配分词器标准的分词器配置配置实例`UAX URL email`分词器空格分词器配置分词过滤器参考字符过滤器参考ElasticSearch文本分析(二)分词器参考分词器接收字符流，将其分解成单独的分词，并输出
2021-06-30 16:43:28
573
原创 ElasticSearch文本分析(一)
文章目录ElasticSearch文本分析(一)概述分词归一化自定义文本分析器概念分析器的剖析字符过滤器分词器分词过滤器索引和查询分析词干提取词干提取分词过滤器算法词干提取器词典词干提取器配置文本分析测试分析器配置内部分析其内部分析器参考指纹分析器示例输出配置配置例子定义`keyword`分析器例子输出配置定义语言分析器模式分析器例子输出配置配置实例驼峰分词器定义简单的分析器例子定义自定义标准分析器例子配置配置例子定义停用词分析器例子：配置配置例子：定义空格分析器例子配置定义ElasticSearch文本
2021-06-30 12:02:46
790
2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人