大数据
文章平均质量分 66
Shall潇
空空如也
展开
-
Zookeeper安装和配置
文章目录一、下载并安装二、修改配置文件三、启动一、下载并安装tar -zxvf zookeeper-3.4.6.tar.gz改名mv zookeeper-3.4.6.tar.gz zkpr二、修改配置文件先重命名文件mv conf/zoo_sample.cfg conf/zoo.cfg再修改配置文件vi conf/zoo.cfg配置线程池中的线程数量配置Zookeeper日志文件存放地址配置集群相关信息将zookeeper分发给其他机器scp -r zkpr/ ro原创 2021-03-22 17:42:04 · 214 阅读 · 2 评论 -
NTP同步时间
文章目录一、安装ntp和ntpd二、修改配置文件一、安装ntp和ntpdyum install -y ntpyum install -y ntpd【注意:没法下载可以先search】二、修改配置文件vi /etc/ntp.conf主节点:其他节点:三、启动/bin/systemctl restart ntpd.serviceservice ntpd startntpstat #查看是否同步,这个过程可能要等一段时间date #查看所有机器时间是否相同形如这样原创 2021-03-22 17:22:42 · 106 阅读 · 0 评论 -
ES---查询
ES—查询【前言】由于ES是将词条存储在倒排索引中,所以能够很快实现查询,为什么不用正排索引,请看之前的文章 点这里一、URI Search简易方式,可临时使用,不适合构建复杂查询二、Query DSL (Domain Specific Language)叶查询语句match查询term查询range查询复合查询子句可以包含叶子查询或者其他复杂查询语句bool查询1.match_all:返回所有文档GET stu/_search{ "query": {原创 2021-03-17 19:24:25 · 132 阅读 · 0 评论 -
ES---倒排索引
ES—倒排索引【前言】Elasticsearch 是通过 Lucene 的倒排索引技术实现比关系型数据库更快的过滤。特别是它对多条件的过滤支持非常好,比如年龄在 18 和 30 之间,性别为女性这样的组合查询。倒排索引很多地方都有介绍,但是其比关系型数据库的 b-tree 索引快在哪里?到底为什么快呢?笼统的来说,b-tree 索引是为写入优化的索引结构。当我们不需要支持快速的更新的时候,可以用预先排序等方式换取更小的存储空间,更快的检索速度等好处,其代价就是更新慢。要进一步深入的化,还是要看一下 L原创 2021-03-17 18:28:20 · 2113 阅读 · 0 评论 -
ES---分词器
ES—分词器转载链接:https://www.cnblogs.com/qdhxhz/p/11585639.html转载 2021-03-17 16:20:48 · 3748 阅读 · 0 评论 -
ES---底层原理
ES—底层原理ES一般情况下分为:主节点,子节点,云端节点主节点:(master:例如下面的boss)负责创建索引、删除索引、分配分片、追踪集群中的节点状态等子节点 :负责存储数据,修改索引,查询信息等云端节点: 负责当数据丢失情况,进行恢复索引分片每个索引默认有5个分片,1个副本数number_of_shards:分片数number_of_replicas:备份数 【注意:该图是ES的head插件创建索引时的截图】至于怎么将文件存储到不同的节点,es会根据hashcode(rout原创 2021-03-17 16:19:50 · 499 阅读 · 0 评论 -
ELK
ELK(Elasticsearch-Logstash-Kibana)文章目录ELK(Elasticsearch-Logstash-Kibana)一、Elasticsearch1、Elasticsearch是什么2、下载并安装3、配置文件4、启动5、elasticsearch-head-master二、Logstash1、Logstash是什么2、下载并安装3、使用三、Kibana1、Kibana是什么2、下载并安装3、配置文件4、启动一、Elasticsearch1、Elasticsearch是什么原创 2021-03-16 16:03:29 · 475 阅读 · 0 评论 -
集群设置免密登录
集群设置免密登录具体步骤如下:1、设置主机名将原来的ip地址改成 简单的名字hostnamectl set-hostname = 主机名2、添加各个主机地址和名称vi /etc/hosts:在hosts文件中加入对应的主机名最后一行加入 原主机名 新主机名然后将hosts文件分发到其他主机scp /etc/hosts root@hadoop101:/etc/3、生成密钥ssh-keygen -t rsa -P “”4、自己保存密钥cat ~/.ssh/id_rsa.pub &g原创 2021-03-12 12:00:11 · 412 阅读 · 0 评论