ElasticSearch配置文档(v1.7.2)

最新推荐文章于 2022-02-09 14:14:43 发布
最新推荐文章于 2022-02-09 14:14:43 发布
阅读量241 收藏
点赞数
分类专栏： 搜索引擎 文章标签： 搜索引擎
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/chengyuanheng/article/details/84754268
版权

ElasticSearch

安装java环境

  • sudo apt-get update
  • java -version
  • sudo apt-get install default-jre
  • sudo apt-get install default-jdk
  • （或者： yum -y install java-1.7.0-openjdk* ）

设置JAVA_HOME

  • sudo update-alternatives --config java（返回YOUR_PATH）
  • sudo nano /etc/environment
  • JAVA_HOME="YOUR_PATH"
  • source /etc/environment
  • echo $JAVA_HOME

安装ElasticSearch（以1.7.2为例）

启动ElasticSearch

  • sudo service elasticsearch start
  • elasticsearch 结构目录位置： /var/lib/elasticsearch

配置ElasticSearch

配置防火墙

  • sudo ufw disable
  • sudo ufw allow from 192.168.1.141
  • sudo ufw enable

或者防火墙

 

#/usr/sbin/iptables -I INPUT -p tcp --dport 80 -j ACCEPT

#/usr/sbin/iptables -I INPUT -p tcp --dport 22 -j ACCEPT

#/usr/sbin/iptables -I INPUT -p tcp --dport 3306 -j ACCEPT

#/usr/sbin/iptables -I INPUT -p tcp --dport 8080 -j ACCEPT

 

/usr/sbin/iptables -I INPUT -p tcp --dport 9200 -j DROP

/usr/sbin/iptables -I INPUT -s 10.44.136.154 -p tcp --dport 9200 -j ACCEPT

/usr/sbin/iptables -I INPUT -s 某个ip -p tcp --dport 9200 -j ACCEPT

/usr/sbin/iptables -I INPUT -s 某个ip -p tcp --dport 9200 -j ACCEPT

 

 

/usr/sbin/service iptables save

创建快照

  • elasticsearch.yml添加： path.repo: ["/mount/backups", "/mount/longterm_backups"]
  • 创建目录： /mount/backups/my_backup,  /mount/longterm_backups
  • 添加权限： sudo chmod -R 777 /mount
  • 重启elasticsearch服务： sudo service elasticsearch restart
  • 创建仓库，并指定仓库类型：

curl -XPUT 'http://localhost:9200/_snapshot/my_backup' -d '

{ 

"type": "fs", 

"settings": { 

                "location": "/mount/backups/my_backup",

                "compress": true 

}

}'

 

curl -XPOST http://localhost:9200/_snapshot/my_backup/snapshot_1/_restore -d '

{

"indices": "index_1,index_2", 

"ignore_unavailable": "true",

"include_global_state": false, 

"rename_pattern": "index_(.+)", 

"rename_replacement": "restored_index_$1"

}'

配置ik分词

  • 版本参考
IK versionES version
master2.1.0 -> master
1.6.02.1.0
1.5.02.0.0
1.4.11.7.2
1.4.01.6.0
1.3.01.5.0
1.2.91.4.0
1.2.81.3.2
1.2.71.2.1
1.2.61.0.0
1.2.50.90.2
1.2.30.90.2
1.2.00.90.0
1.1.30.20.2
1.1.20.19.x
1.0.00.16.2 -> 0.19.0
  • checkout对应tag：  git checkout tags/v1.4.1 -b v1.4.1
  • 安装maven： (略)
  • 编译jar包： sudo mvn package
  • copy ik文件夹到/etc/elasticsearch/: sudo cp config/ik /etc/elasticsearch/ 
  • copy jar到/usr/share/elasticsearch/lib/: sudo cp target/*.jar /usr/share/elasticsearch/lib
  • 配置elasticsearch.yml
index:
  analysis:
    analyzer:
      ik:
        alias: [ik_analyzer]
        type: org.elasticsearch.index.analysis.IkAnalyzerProvider
      ik_max_word:
        type: ik
        use_smart: false
      ik_smart:
        type: ik
        use_smart: true

index.analysis.analyzer.default.type : "ik"
  • 创建index:  
curl -XPUT http://localhost:9200/index
  • 创建mapping
curl -XPOST http://localhost:9200/index/fulltext/_mapping -d'
{
    "fulltext": {
             "_all": {
            "analyzer": "ik_max_word",
            "search_analyzer": "ik_max_word",
            "term_vector": "no",
            "store": "false"
        },
        "properties": {
            "content": {
                "type": "string",
                "store": "no",
                "term_vector": "with_positions_offsets",
                "analyzer": "ik_max_word",
                "search_analyzer": "ik_max_word",
                "include_in_all": "true",
                "boost": 8
            }
        }
    }
}'

  mapping:

 

curl -XPUT localhost:9200/feiliwu -d '{

"mappings":{

     "product":{

            "_timestamp":{

                    "enables": true

             }

      }

}

 

}'

  • 录入数据
curl -XPOST http://localhost:9200/index/fulltext/1 -d'
{"content":"美国留给伊拉克的是个烂摊子吗"}
'
curl -XPOST http://localhost:9200/index/fulltext/2 -d'
{"content":"公安部：各地校车将享最高路权"}
'
curl -XPOST http://localhost:9200/index/fulltext/3 -d'
{"content":"中韩渔警冲突调查：韩警平均每天扣1艘中国渔船"}
'
curl -XPOST http://localhost:9200/index/fulltext/4 -d'
{"content":"中国驻洛杉矶领事馆遭亚裔男子枪击 嫌犯已自首"}
'
  • 查询
curl -XPOST http://localhost:9200/index/fulltext/_search  -d'
{
    "query" : { "term" : { "content" : "中国" }},
    "highlight" : {
        "pre_tags" : ["<tag1>", "<tag2>"],
        "post_tags" : ["</tag1>", "</tag2>"],
        "fields" : {
            "content" : {}
        }
    }
}
'

 

安装Marvel

参考资料

      Logstash

下载安装

配置jdk

  • sudo nano  /etc/profile

 

export JAVA_HOME=/usr/lib/jvm/java-7-openjdk-amd64

export CLASSPATH=.:$JAVA_HOME/jre/lib/rt.jar

export PATH=$PATH:$JAVA_HOME/bin

export LOGSTASH_HOME=/opt/logstash

export LOGSTASH=$LOGSTASH_HOME/bin

export PATH=$LOGSTASH:$PATH

 

  • source /etc/profile

  配置logstash

  • sudo nano /etc/logstash/conf.d/logstash-simple.conf

 

 

 

input {

 

  tcp {

    port => 5000

    type => syslog

  }

  udp {

    port => 5000

    type => syslog

  }

}

filter {

  if [type] == "syslog" {

    grok {

      match => { "message" => "%{SYSLOGTIMESTAMP:syslog_timestamp} %{SYSLOGHOST:syslog_hostname} %{DATA:syslog_program}(?:\[%{POSINT:syslog_pid}\])?: %{GREEDYDATA:syslog_message}" }

      add_field => [ "received_at", "%{@timestamp}" ]

      add_field => [ "received_from", "%{host}" ]

    }

    syslog_pri { }

    date {

      match => [ "syslog_timestamp", "MMM  d HH:mm:ss", "MMM dd HH:mm:ss" ]

    }

  }

}

output {

    elasticsearch {

        protocol => "http"

        host => "localhost:9200"

    }

    stdout { }

}

 

 

 

 

启动logstash

  • sudo service logstash status
  • sudo service logstash start

查看log

  • tail -f /var/log/logstash/logstash.log

参考资料

Kibana

建立使用kibana的分组

  • sudo groupadd -g 999 kibana 
  • sudo useradd -u 999 -g 999 kibana
  • If those commands fail because the999GID or UID already exist, replace the number with IDs that are free

下载安装

配置

  • sudo nano ~/kibana-4*/config/kibana.yml（server.host: "localhost"）
  • sudo mkdir -p /opt/kibana
  • sudo cp -R ~/kibana-4*/* /opt/kibana/
  • sudo chown -R kibana: /opt/kibana

run as a service

Install Nginx

  • sudo apt-get install nginx apache2-utils(sudo yum install nginx httpd)
  • sudo htpasswd -c /etc/nginx/htpasswd.users kibanaadmin 
  • sudo vi /etc/nginx/sites-available/default

 

 

 

server {

listen 80;

server_name localhost;

auth_basic "Restricted Access";

auth_basic_user_file /etc/nginx/htpasswd.users;

location / {

proxy_pass http://localhost:5601;

proxy_http_version 1.1;

proxy_set_header Upgrade $http_upgrade;

proxy_set_header Connection 'upgrade';

proxy_set_header Host $host;

proxy_cache_bypass $http_upgrade;

}

}

  • sudo service nginx restart

Configure An Index Pattern

  • Go to Settings → Advanced.
  • Edit the metaFields and add "_timestamp". Hit save.
  • Now go back to Settings → Indices 

Clipboard Image.png

  • create 

Clipboard Image.png

参考资料

cckk
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
elasticsearch-1.7.1
12-20
elasticsearch-1.7.1低版本
ElasticSearch 1.7安装
谭哥杂谈
12-20 2734
ElasticSearch1.7安装 ElasticSearch17安装 环境 下载 参考 前提 安装 配置 运行 环境 CentOS6.6 X86_64 下载 wget https://download.elastic.co/elasticsearch/elasticsearch/elasticsearch-1.7.3.tar.gz 参考 官方安装文档
ElasticSearch1.7.1 安装
weixin_30832143的博客
09-15 216
--测试环境----centos 6.5 ----Linux version 2.6.32-431.el6.x86_64 (mockbuild@c6b8.bsys.dev.centos.org) ----(gcc version 4.4.7 20120313 (Red Hat 4.4.7-4) (GCC) ) #1 SMP Fri Nov 22 03:15:09 UTC 2013--特殊说明：如不...
Elasticsearch1.7.3安装、配置
hangshao的博客
02-14 3076
ElasticSearch安装、配置    ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口。Elasticsearch是用Java开发的，并作为Apache许可条款下的开放源码发布，是当前流行的企业级搜索引擎。设计用于云计算中，能够达到实时搜索，稳定，可靠，快速，安装使用方便。 使用案例：
Geoserver配置Elasticsearch数据源
gery1990的专栏
11-23 756
Geoserver配置ES数据源软件环境部署elasticgeo安装Elasticsearch添加ES数据源 软件环境 操作系统：Windows server 2012R2 Geoserver2.8.2下载 Elaticsearch7.1下载 elasticgeo2.8.3 下载 jdk1.8 部署elasticgeo 将elasticgeo文件夹内的所有*.jar拷贝到geoserver的安装目录lib下（geoserver/WEB-INF/lib） 安装Elasticsearch 详细步骤看：https
elasticsearch配置优化文档
最新发布
06-05
### Elasticsearch配置优化要点 #### 一、Java (JVM) 版本的选择 Elasticsearch 是基于 Java 构建的应用程序，它至少需要 Java 8（即 Java 1.8）来运行。根据官方建议，建议使用 **1.8.0_73 或更高版本** 的 Java...
ElasticSearch学习文档V2.0.pdf
08-16
ElasticSearch学习文档V2.0 本文档对ElasticSearch进行了详细的介绍，涵盖其基本概念、原理、应用场景、安装步骤等方面的知识点。 一、RESTful架构风格 ElasticSearch学习文档首先介绍了RESTful架构风格的概念。...
ElasticSearch技术文档V2.0.docx
12-13
**Elasticsearch技术文档V2.0概览** Elasticsearch是一种开源的全文搜索引擎，它以其分布式、实时、可扩展的特性，广泛应用于日志分析、监控、搜索和数据分析等领域。本技术文档针对Elasticsearch的初学者，旨在...
elasticsearch-6.3.0-API文档-中文版.zip
06-25
赠送原API文档：elasticsearch-6.3.0-javadoc.jar； 赠送源代码：elasticsearch-6.3.0-sources.jar； 赠送Maven依赖信息文件：elasticsearch-6.3.0.pom； 包含翻译后的API文档：elasticsearch-6.3.0-javadoc-API文档...
elasticgeo:用于弹性搜索的 Geotools 数据存储
06-22
elasticsearch Geotools 数据存储 第一次尝试使用 elasticsearch GeoTools 数据存储。 基于 GeoTools 指南中的 CSV 数据存储教程。 在 Geoserver 2.1.1 中安装 ES 和 GeoServer（二进制分发版）中不同的日志实现存在问题作为一种解决方法，我在 {GEOSERVER_HOME}/lib 和 {GEOSERVER_HOME}/webapps/geoserver/WEB-INF/lib 中升级到 SLF4J 1.6.1 . {GEOSERVER_HOME}/lib 去掉 log4j-1.2.14.jar slf4j-simple-1.0.1.jar 添加 log4j-1.2.16.jar slf4j-api-1.6.1.jar slf4j-simple-1.6.1.jar {GEOSERVER_HOM
Elasticsearch 7.15.2最新版安装
Memory_share的博客
11-21 1683
ElasticSearch安装 官网：https://www.elastic.co/cn/elasticsearch/ 环境要求：JDK1.8最低要求 使用Java开发，必须保证ElasticSearch的版本和Java的核心jar包版本对应！（保证Java环境没有问题） 1、Windows下安装 前往官网下载：https://www.elastic.co/cn/downloads/elasticsearch 选择自己对应的版本下载即可 下载完成后我们会得到一个压缩文件，将它解压到我们的环
Iptables用法规则及防火墙配置
weixin_30699465的博客
10-21 133
【转载】http://www.cnblogs.com/yi-meng/p/3213925.html iptables规则 即防火墙规则，在内核看来，规则就是决定如何处理一个包的语句。如果一个包符合条件，我们就用相应动作处理。 1.规则语句如下： iptables [-t table] command chains [creteria] -j action 语法说明： -t...
ElasticSearch+ElasticGeo+Geoserver发布ES地理数据
weixin_34130269的博客
12-20 1298
依赖GeoserverElasticSearchElasticGeo部署部署ElasticGeo使用创建ES数据源并发布发布 依赖 Geoserver 环境搭建参考： ElasticSearch 环境搭建参考： ElasticGeo 用于在Geoserver中发布Elasticsearch的数据，支持CQL查询及过滤 https://github.com/ngageoint/...
elasticsearch-7.2.1 Linux系统 部署指南
KwokRoot的博客
11-16 2106
系统版本： CentOS release 6.6 (Final) Elasticsearch版本： Elasticsearch-7.2.1 环境要求 1.Java 运行环境。 ①查看 Java 版本(java -version)，保证 Java 版本在 8u40 +。 ②Elasticsearch-7.2.1 版本已自带 OpenJDK 捆绑版本(安装包 jdk 目录中)。...
iptables 开启指定端口
qingwei201314
07-04 1344
iptables -I INPUT -p tcp --dport 8080 -j ACCEPT iptables -I OUTPUT -p tcp --sport 8080 -j ACCEPT   给指定ip开启某端口访问权限： iptables -I INPUT -p tcp --dport 55618  -j DROP iptables -I INPUT -s 115.28.139...
elasticsearch高级功能系列之geo地理坐标
1073960086的博客
08-14 1万+
1、首先创建mapping PUT test { "mappings": { "test":{ "properties": { "location":{ "type": "geo_point" } } } } } 2、导入数据 POST test/test { "lo
Linux 防火墙开放特定端口 （iptables）
热门推荐
weixin_44260459的博客
02-09 2万+
查看状态: iptables -L -n 下面添加对特定端口开放的方法： 使用iptables开放如下端口 /sbin/iptables -I INPUT -p tcp --dport 8000 -j ACCEPT 保存 /etc/rc.d/init.d/iptables save 重启服务 service iptables restart 查看需要打开的端口是否生效？ /etc/init.d/iptables status 法2: 或直接编辑/etc/sysconfig/iptables -A INPUT
ElasticSearch for GIS应用
GIS+=地理信息+云计算+大数据+容器+物联网+...
09-01 8121
基础介绍 Elasticsearch是一个基于Apache Lucene(TM)的开源搜索引擎。无论在开源还是专有领域，Lucene可以被认为是迄今为止最先进、性能最好的、功能最全的搜索引擎库。 但是，Lucene只是一个库。想要使用它，你必须使用Java来作为开发语言并将其直接集成到你的应用中，更糟糕的是，Lucene非常复杂，你需要深入了解检索的相关知识来理解它是如何工作的。 Ela
elasticSearch在jdk1.7时的增删改查api
qq_39071530的博客
05-17 1514
    最近在用elasticSearch做全文检索工作，但是项目中使用的jdk为1.7，所以选用了2.3.5版本的elasticSearch，网上的资料大都很乱，所以抽出时间来写一篇详细一点的，如果你的情况和我一样，希望能帮助到你。本项目用到的资源elasticSearch2.3.5+对应版本的ik分词器+gson的jar包。如果转载本文，请注明出处。 1.安装elasticSearch  ...
ElasticSearch2.0安装及1.7.2升级全面指南
在本文档中，我们将深入探讨ElasticSearch 2.0的安装过程，以及如何从1.7.2版本升级到2.0。ElasticSearch是一款广泛使用的开源全文搜索引擎，提供实时、分布式、高可扩展的数据搜索和分析能力。 一、ElasticSearch...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值