- 博客(12)
- 资源 (26)
- 收藏
- 关注
转载 linux中搭建ElasticSearch-2.x Logstash-2.x Kibana-4.5.x Kafka为消息中心的ELK日志平台
介绍ELK是业界标准的日志采集,存储索引,展示分析系统解决方案logstash提供了灵活多样的插件支持不同的input/output主流使用redis/kafka作为日志/消息的中间环节如果已有kafka的环境了,使用kafka比使用redis更佳以下是一个最简化的配置做个笔记,elastic官网提供了非常丰富的文档不要用搜索引擎去搜索,没多少结果的,请直接看官网文档
2018-01-16 13:59:26 370
转载 linux下使用elk+redis搭建nginx日志分析平台
logstash,elasticsearch,kibana 怎么进行nginx的日志分析呢?首先,架构方面,nginx是有日志文件的,它的每个请求的状态等都有日志文件进行记录。其次,需要有个队列,redis的list结构正好可以作为队列使用。然后分析使用elasticsearch就可以进行分析和查询了。我们需要的是一个分布式的,日志收集和分析系统。logstash有agent和indexe
2018-01-16 13:57:20 403
转载 Docker构建ELK Docker集群日志收集系统_docker
当我们搭建好Docker集群后就要解决如何收集日志的问题 ELK就提供了一套完整的解决方案 本文主要介绍使用Docker搭建ELK 收集Docker集群的日志ELK简介ELK由ElasticSearch、Logstash和Kiabana三个开源工具组成Elasticsearch是个开源分布式搜索引擎,它的特点有:分布式,零配置,自动发现,索引自动分片,索引副本机制,rest
2018-01-16 13:54:57 4600
转载 ELK Stack日志实时收集分析
ELK stackELK stack是又Elasticsearch,lostash,kibana 三个开源软件的组合而成,形成一款强大的实时日志收集分析展示系统。Logstash:日志收集工具,可以从本地磁盘,网络服务(自己监听端口,接受用户日志),消息队列中收集各种各样的日志,然后进行过滤分析,并将日志输入到Elasticsearch中。Elasticsearch:日志分布式
2018-01-16 13:53:17 1262
转载 Nginx基础入门之proxy反向代理常用配置项说明
众所周知,nginx是一个很优秀的反向代理服务器,它反向代理的性能堪比haproxy,在很多应用场景中,nginx常常单独作为反向代理server+keepalived的配合构建高性能,高可用集群,下面我们讲讲nginx配置反向代理时一些常用配置参数说明,如下:一. nginx反向代理配置项说明1.1 proxy_pass语法:proxy_pass URL;配置
2018-01-09 23:50:26 1934
转载 Mysql innodb 间隙锁
前段时间系统老是出现insert死锁,很是纠结。经过排查发现是间隙锁!间隙锁是innodb中行锁的一种, 但是这种锁锁住的却不止一行数据,他锁住的是多行,是一个数据范围。间隙锁的主要作用是为了防止出现幻读,但是它会把锁定范围扩大,有时候也会给我们带来麻烦,我们就遇到了。 在数据库参数中, 控制间隙锁的参数是:innodb_locks_unsafe_for_binlog, 这个参数默认值是OFF
2018-01-08 12:46:07 333
转载 nginx启动、重启、重新加载配置文件和平滑升级
Nginx有一个主进程和几个工作进程,主进程的主要作用就是读取、评估配置文件和管理工作进程,工作进程对请求做实际处理。工作进程的数量是在配置文件中配置的,一般设置为cpu的核心数*线程数。nginx可以通过信号控制,默认情况下,主进程的进程ID记录在/usr/local/nginx/logs/nginx.pid 文件中。信号可以通过nginx可执行文件发送给nginx (n
2018-01-08 12:37:12 1267
转载 MySQL锁定机制简介
前言为了保证数据的一致完整性,任何一个数据库都存在锁定机制。锁定机制的优劣直接应想到一个数据库系统的并发处理能力和性能,所以锁定机制的实现也就成为了各种数据库的核心技术之一。本章将对MySQL中两种使用最为频繁的存储引擎MyISAM和Innodb各自的锁定机制进行较为详细的分析。 MySQL锁定机制简介数据库锁定机制简单来说就是数据库为了保证数据的一致性而使各种共享
2018-01-07 10:46:57 367
转载 python学习笔记4-redis multi watch实现锁库存
python 关于redis的基本操作网上已经很多了,这里主要介绍点个人觉得有意思的内容1.redis的事务操作以及watch 乐观锁;后面描述2.tornado下异步使用redis的方式 redis是单进程单线程模型,本身应对外部请求的是单任务的,也是多线程安全的,这个大家都应该知道的, 所以才会经常有人用redis做计数服务。 首先red
2018-01-06 23:49:05 807
转载 大数据系列之Flume+kafka 整合
关于Flume 的 一些核心概念:组件名称 功能介绍Agent代理使用JVM 运行Flume。每台机器运行一个agent,但是可以在一个agent中包含多个sources和sinks。Client客户端生产数据,运行在一个独立的线程。Source源从Client收集数据,传递给Channel。
2018-01-05 02:49:25 501
转载 centos7中给Elasticsearch5 安装bigdesk
环境系统:centos7 elasticsearch:5.2.2安装步骤步骤由于elasticsearch不再建议支持插件的安装方式。建议作为独立的程序来安装类似于bigdesk、head。以前都是插件方式来安装。现在呢?官网介绍应该Run bigdesk standalone大致的步骤为:git clone https://github.c
2018-01-03 12:31:42 246
转载 elasticsearch-5.5.1安装head客户端
1、安装nodejs、npm、gruntcurl -sL -o /etc/yum.repos.d/khara-nodejs.repo https://copr.fedoraproject.org/coprs/khara/nodejs/repo/epel-7/khara-nodejs-epel-7.repo 然后安装 yum install -y nodejs nodejs-npm
2018-01-02 22:18:22 300
深入理解Java虚拟机:JVM高级特性与最佳实践].周志明.高清扫描版.pdf
2017-01-09
高性能的socket通讯服务器(完成端口模型--IOCP)
2014-06-02
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人