- 博客(19)
- 资源 (13)
- 收藏
- 关注
原创 大数据平台系列:hadoop HDFS HA集群搭建
01前言 hadoop是由Apache基金会所开发的一个分布式的大数据计算与存储平台,特点是:可靠性高、易扩展、计算高效与成本低。 它有两个核心项目,其中HDFS负责数据存储,MapReduce负责分布式计算。本文主要讲解HDFS项目的HA架构搭建 本文转自我个人的公众号:天目星 ,请大家多多关注。一、使用的软件版本与架构图。l...
2019-06-24 08:57:14 419 1
原创 Kubernetes系列:k8s 1.14单节点安装
01前言 最近k8s很火,相信大家都听过。那什么是k8s呢?Kubernetes狭义的说:它是一个开源的容器集群管理系统,可以实现容器集群的自动化部署、自动扩缩容、维护等功能。下面我们来测试一下搭建单节点k8s。 本文转自我个人的公众号:天目星 ,请大家多多关注。请关注我的微信公众号一、使用的软件与架构图linux:CentOS 7....
2019-06-19 09:55:38 2609 6
原创 mysql系列:mysql5.7master-slave
01前言mysql是关系型数据库管理系统的一种,具有体积小、开源、社区支持好等特性。相对oracle、db2等来说非常适合初创公司使用。 本文转自我个人的公众号:天目星 ,请大家多多关注。请关注我的微信公众号一、使用的软件与架构图linux:CentOS7.5.1804mysql:mysql-5.7.25-linux-glib...
2019-06-19 09:43:34 420
原创 ELK集群组件-kafka
01前言 ELK在生产环境使用默认需要配置一个中间件,用于异步模式收集日志。我们选用kafka,它可以为数据提供一个统一的、高吞吞量、低延迟的收集平台,这将解决logstash没有消息队列缓存,存在数据丢失隐患的缺点。官方建议使用Redis做中间件,这个具体看个人收集的数据完整性,kafka对比Redis的话数据比较安全。 本文转自我个人的公众号:天目星...
2019-06-19 09:31:14 494
原创 ELK小技巧-kibana设置登陆验证
本文转自我个人的公众号:天目星 ,请大家多多关注。请关注我的微信公众号没有安装x-pack插件的kibana可以直接登陆,这样非常不安全。如果不打算使用x-pack,可以使用nginx的ngx_http_auth_basic_module模块来提供安全登陆验证。系统环境参考以下链接ELK单机安装系列:ELK单机搭建与使用(一)ELK单机搭建与使用(二)...
2019-06-19 09:26:35 3991
原创 ELK单机搭建与使用(二)
01前言上期我们演示了怎样安装单机版ELK:ELK单机搭建与使用(一),现在用这个平台来收集日志。nginx经常被用于反向代理,我们来试试收集它的相关日志。 本文转自我个人的公众号:天目星 ,请大家多多关注。请关注我的微信公众号一、使用的软件版本与架构图linux:CentOS7.5.1804El...
2019-06-19 09:10:43 371
原创 ELK单机搭建与使用(一)
01前言ELK是elastic公司旗下三款产品ElasticSearch、Logstash、Kibana的首字母组合,主要用于日志收集、分析与报表展示。不夸张的说:这是一个非常强大的大数据分析平台。 本文转自我个人的公众号:天目星 ,请大家多多关注。请关注我的微信公众号一、使用的软件版本与架构图。li...
2019-06-19 09:02:10 1712
原创 Keepalived+Nginx+Tomcat+Redis实现高可用负载均衡(二)
01前言上期我们介绍keepalived与Nginx的配置,现在我们介绍一下Tomcat与Redis是怎么实现session共享。 本文转自我个人的公众号:天目星 ,请大家多多关注。请关注我的微信公众号一、使用的软件版本与架构图。linux:CentOS 7.5.1804Keepalived:ke...
2019-06-19 08:50:40 520
原创 Keepalived+Nginx+Tomcat+Redis实现高可用负载均衡(一)
01前言一个稳定Web服务器架构必须实现高可用与负载均衡。本期我们来配置Keepalived+Nginx+Tomcat+Redis的架构。keepalived用于管理VirtualIP,与nginx一起搭配实现高可用性的反向代理前端;后端使用Tomcat管理web服务,并利用Redis实现session共享。 本文转自我个人的公众号:天目星 ...
2019-06-18 09:56:51 799
原创 搭建LNMP (三) --搭建wordpress站点
01前言上期介绍了LNMP的安装与相关配置,现在我们来尝试搭建自己的第一个Blog站点。我们选用wordpress这个开源软件来搭站。WordPress是一款个人博客系统与内容管理系统软件,它是使用PHP语言和MySQL数据库开发的,非常适合在LNMP环境下使用。 本文转自我个人的公众号:天目星 ,请大家多多关注。请关注我的微信公众号...
2019-06-18 09:50:11 602
原创 搭建LNMP (二)
LNMP环境搭建个人建站经常使用Wordpress或者Discuz这两个开源软件。而这都需要LNMP基础环境的支持。本文介绍怎么在Centos7下面安装nginx+mysql+PHP 本文转自我个人的公众号:天目星 ,请大家多多关注。请关注我的微信公众号01前言上期介绍了Nginx跟myslq的安装,现在我们来安...
2019-06-18 09:47:16 213
原创 搭建LNMP (一)
LNMP环境搭建个人建站经常使用Wordpress或者Discuz这两个开源软件。而这都需要LNMP基础环境的支持。本文介绍怎么在Centos7下面安装nginx+mysql+PHP 本文转自我个人的公众号:天目星 ,请大家多多关注。请关注我的微信公众号一、使用的软件版本。linux:CentOSLinuxr...
2019-06-18 09:43:13 802
原创 mysql系列: 基于MariaDB10的Galera Cluster集群
01前言 Galera Cluster是Mysql基于innodb引擎,来实现multi-master及数据实时同步,并且免费开源的高可用方案。其特点有:对业务层提供透明接口;数据库读写自动分发各节点,无需手动做读写分离;并且统一管理集群成员(节点自动增删)。Galera Cluster的官方网站为http://galeracluster.com,具体的...
2019-06-18 09:38:21 1002
原创 python系列:多版本管理器-pyenv
01前言Python现有的版本多,每个项目使用的Python版本都不一样,管理起来比较麻烦。github有一个项目叫做pyenv,它是一个多版本管理工具,非常好用,不但支持多版本,而且可以自由切换。本文以CentOS7平台为例,演示pyenv的功能。本文转自我个人的公众号:天目星 ,请大家多多关注。请关注我的微信公众号一、安装...
2019-06-18 09:31:47 312
原创 大数据平台系列:使用ambari安装hadoop(二)
1前言ApacheAmbari是一种基于Web的工具,支持ApacheHadoop集群的供应、管理和监控。ambari项目的出现使得hadoop系列的组件可以在webUI中定制安装,并提供管理功能。上期我们演示了怎么安装ambari集群:(大数据平台系列:使用ambari安装hadoop(一)),现在使用ambari来部署hadoop组件。 ...
2019-06-18 09:28:38 550
原创 大数据平台系列:使用ambari安装hadoop(一)
1前言ApacheAmbari是一种基于Web的工具,支持ApacheHadoop集群的供应、管理和监控。ambari项目的出现使得hadoop...
2019-06-18 09:24:33 1728
原创 大数据平台系列:使用ceph-deploy部署ceph
1前言Ceph是一个开源的分布式存储系统,它提供高性能(数据分布式存储)、高可用性(故障自愈)、可扩展性(支持PB级)数据存储平台。Ceph已经被集成在主线Linux内核中,作为备选的文件系统,相信后期会提供更好的发展。它的社区活跃度高,资料多,便于学习。 本文转自我个人的公...
2019-06-18 09:16:09 933
原创 CI/CD工具集:搭建私有仓库 gitlab
01前言gitlab是一个基于Git实现的在线代码仓库托管软件,我们一般用于公司内部搭建git私有仓库。本例使用gitlab社区版来演示gitlab的一般操作。 本文转自我个人的公众号:天目星 ,请大家多多关注。请关注我的微信公众号一、使用的软件与架构图linux:CentOS7.5.1804gitlab-ce:gitlab-ce...
2019-06-18 08:23:44 760
原创 CI/CD工具集:搭建私有Docker镜像仓库Harbor
01前言 Harbor是一个用于存储和分发Docker镜像Registry私服,我们可以使用它来管理企业内部的Docker镜像。它提供UI,可以方便用户管理。本文转自我个人的公众号:天目星 ,请大家多多关注。请关注我的微信公众号一、使用的软件与架构图linux:CentOS 7.5.1804harbor:harbor-offlin...
2019-06-16 18:14:35 508
openssh-8.1p1.tar.bz2
2019-12-23
nginx+keepalived+tomcat+redis文档
2019-06-26
阿里云ECS+SLB的架构
2019-06-26
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人