- 博客(35)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 Apache SkyWalking
更多内容访问我的个人主页 www.jevic.cnSkyWalking是观察性分析平台和应用性能管理系统。提供分布式追踪、服务网格遥测分析、度量聚合和可视化一体化解决方案。Apache SkyWalkingSkyWalking 的核心是数据分析和度量结果的存储平台，通过 HTTP 或 gRPC 方式向 SkyWalking Collecter 提交分析和度量数据，SkyWalking Collecter 对数据进行分析和聚合，存储到 Elasticsearch、MySQL、TiDB 等其一即可，最
2020-06-30 13:51:58
469
1
原创 spark standalone work扩展
所有节点配置Java环境以及下载spark安装包所有节点配置hosts文件192.168.2.28 master 192.168.2.29 node1 192.168.2.30 node2 1. 创建spark用户[root@master ~]# useradd spark [root@node1 ~]# useradd spark2. 配置免秘钥登录具体操作查看此处: http://b
2017-02-09 15:45:56
648
原创 bearychat+hubot chatops运维机器人
1.安装nodejsyum安装：[root@node1 ~]# yum install -y epel-release[root@node1 ~]# yum install -y npm[root@node1 ~]# npm -version3.10.8[root@node1 ~]# node -vv6.9.1二进制包安装最新版：官网下载地址：https://nodejs.org/e
2017-02-07 14:52:01
3855
转载 Docker Swarm Mode
Swarm 模式为了使用 Docker 内置的 swarm 模式，你需要安装 Docker Engine v1.12.0 以上版本的 Docker，或者，相应的安装最新的 Docker for Mac, Docker for Windows Beta。Docker Engine 1.12 内置了 swarm 模式来让用户便捷的管理集群。 通过 Docker CLI 可以创建一个 swarm 集群，部
2017-01-22 11:40:05
749
原创 docker overlayFS 简介
详细介绍请访问Docker官网docker镜像驱动不止是overlayfs一种，还有aufs，device mapper方式，但原理基本一致，而且overlayfs是相对比较新的一种方式!1.如何判断内核中加载了overlayroot@qa-control-pub-ci-build1:~# lsmod |grep over overlay 28140 0如果没有加载的话，则使用如下命令加载mod
2017-01-22 11:35:00
2972
原创 Docker 基础知识记录
2016-7-10 初版释出Docker的主要优点：轻量级资源使用：容器在进程级别隔离并使用宿主机的内核，而不需要虚拟化整个操作系统。可移植性：一个容器应用所需要的依赖都在容器中，这就让它可以在任意一台Docker主机上运行。可预测性：宿主机不需要关心容器内运行的是什么，同样，容器也不需要关心是在哪个宿主机上运行。所需要的接口都是标准化的，并且交互也都是可预测的。通常在用Docker来设
2017-01-20 23:23:58
1045
转载 Docker 1.13 新增功能
Docker 1.13 在 2017 年 1 月 18 日发布了。从 2016 年 7 月 29 日发布 1.12 以来，已经过去 5 个多月了，对于活跃的 Docker 社区来说，已经很久了，让我们看看都 1.13 都新增了什么内容吧。1.13 有一千四百多个 issue/pull request，五千多个 commits，是 Docker 历史上最高的发布版本。这并不是一个简单的小版本变化，里
2017-01-20 10:21:32
649
原创 ELK & ElasticSearch 5.1 基础概念及配置文件详解
配置文件基本概念接近实时NRT集群cluster索引index文档document映射mapping类型type分片shards副本replicas数据恢复recovery数据源River网关gateway自动发现discoveryzen通信Transportelasticsearch yml 详解
2017-01-17 14:35:54
5590
原创 Elastic Stack 5.1 ELK 集群配置示例
Elastic Stack 套件简介详情请查看：https://www.elastic.co/products Elasticsearch是Elastic Stack中最核心的组件，它是分布式、支持RESTful搜索和分析的引擎；并集中存储了你的数据；Logstash数据处理的pipeline（INPUTS->FILTERS->OUTPUTS; Kibana可视化你的Elasticsear
2017-01-16 14:30:51
6358
原创 文件同步
文件同步目录文件结构$ pwd && ls/home/test-shellconfig docscluster.sh fileupdate.sh$ tree -r.├── fileupdate.sh├── docscluster.sh└── config └── config.sh脚本内容$ cat docscluster.sh#!/bin/bash
2017-01-10 16:08:38
608
原创 ssh密钥登录认证自动配置脚本
#!/bin/bash# ssh密钥登录认证脚本# 需要提供公钥# ex: ./authorized.sh username
2017-01-10 15:53:52
1077
原创 Linux 系统CPU及系统负载监控脚本
配置邮件通知！【使用postfix，如若安装有sendmail，停用或卸载即可】# yum install -y postfix# yum install -y mailx# systemctl start postfix && systemctl enable postfix测试是否可发送邮件：# echo "Test Gitlab mail from postfix" | mail -s
2017-01-06 16:02:41
3062
原创 elasticsearch 运维记录
目录 (elasticsearch 基础知识汇总)索引分片 从策略层面控制分片分配的选择move 指令节点下线冷热数据的读写分离集群自动发现API 接口数据写入数据读取数据删除数据更新搜索请求集群健康状态level 请求参数节点状态监控接口GC垃圾回收索引分片： 从策略层面，控制分片分配的选择磁盘限额 为了保护节点数据安全，ES 会定时(cluster.info.up
2016-12-30 17:23:16
7495
原创 Logstash -- Nginx 日志收集处理!
Nginx 日志收集示例一：Logstash 默认自带了 apache 标准日志的 grok 正则:COMMONAPACHELOG %{IPORHOST:clientip} %{USER:ident} %{NOTSPACE:auth} \[%{HTTPDATE:timestamp}\] "(?:%{WORD:verb} %{NOTSPACE:request}(?: HTTP/%{NUMBER:htt
2016-12-30 11:23:38
9609
2
转载 ElsaticSearch 2.3 Dockerfile 解析
ElsaticSearch 2.3 Dockerfile 解析查看作者原文 Github地址 Docker HubDockerfile# 使用Dockerhu的java:8-jre作为基础镜像，elashticsearch依赖于jdk7以上版本FROM java:8-jre# elashticsearch不能用root用户运行，所以安装gosu.用法: ./gosu user-spec com
2016-12-30 11:04:09
524
原创 Docker 集群监控平台---cAdvisor-InfluxDB-Grafana
目录目录基础概念cAdvisorInfluxDBGrafana镜像列表启动脚本influxdb 设置cAdvisorGrafana 图形配置示例图请右键打开新标签查看原图参考链接基础概念cAdvisor cAdvisor 为Docker容器用户提供了了解运行时容器资源使用和性能特征的工具。cAdvisor的容器抽象基于Google的lmctfy容器栈，因此原生支持Docker
2016-12-29 18:32:49
1199
原创 docker 基础安装配置以及swarm 基本操作使用
1 系统安装并初始化2 IP 及主机名 配置3 配置ssh免密码登录安装Docker以及初始配置1 安装Docker 所有主机操作相同 2 查看Docker是否安装成功3 修改docker的配置文件并启动- Daocloud 镜像加速器
2016-12-29 14:17:02
3162
原创 Spark 分布式集群配置示例
本文概述：Hadoop 2.6.5 版本, 需要事先配置好Hadoop的分布式集群环境如果没有配置好Hadoop的分布式集群环境，请点击查看 Hadoop分布式集群安装配置教程spark 版本 spark-2.0.2-bin-hadoop2.6统一使用hadoop 用户并给予 sudo 授权
2016-12-26 18:55:07
442
原创 Spark 安装配置及基本操作示例
简介：Spark是UC Berkeley AMP lab (加州大学伯克利分校的AMP实验室)所开源的类Hadoop MapReduce的通用并行框架，Spark，拥有Hadoop MapReduce所具有的优点；但不同于MapReduce的是Job中间输出结果可以保存在内存中，从而不再需要读写HDFS，因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的MapReduce的算法。
2016-12-26 17:26:47
581
原创 Zookeeper基础安装--伪分布式集群配置
Apache ZooKeeper™简介Apache Zookeeper 是由 Apache Hadoop 的 Zookeeper 子项目发展而来，现在已经成为了 Apache 的顶级项目。Zookeeper 为分布式系统提供了高效可靠且易于使用的协同服务，它可以为分布式应用提供相当多的服务，诸如统一命名服务，配置管理，状态同步和组服务等。Zookeeper 接口简单，开发人员不必过多地纠结在分布式系统
2016-12-26 15:47:12
610
原创 Hadoop HA 高可用平台配置实例
概述Hadoop是一个由Apache基金会所开发的分布式系统基础架构。 用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。Hadoop实现了一个分布式文件系统（Hadoop Distributed File System），简称HDFS。HDFS有高容错性的特点，并且设计用来部署在低廉的（low-cost）硬件上；
2016-12-24 12:56:45
539
原创 企业级Docker私有仓库Harbor管理平台构建示例
Harbor： 著名虚拟化厂商VMware开源的docker仓库平台解决方案! - 项目下载地址 - 安装Docker 以及 docker-compose [参考官网]由于所需要的镜像较多，在下载镜像之前建议大家配置加速器,推荐大家使用Daocloud提供的加速器
2016-12-13 14:51:09
661
原创 kubernetes基础入门之-配置kubernetes skyDNS服务
部署kubernetes skyDNSkubernetes可以为pod提供dns内部域名解析服务。其主要作用是为pod提供可以直接通过service的名字解析为对应service的ip的功能！
2016-12-13 14:49:08
1055
原创 kubernetes基础入门之-安装部署配置示例
简介：Kubernetes是Google开源的容器集群管理系统，其提供应用部署、维护、 扩展机制等功能，利用Kubernetes能方便地管理跨机器运行容器化的应用，其主要功能如下
2016-12-13 14:47:42
769
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人