Lu-Yu-CSDN博客

原创 MySQL数据库详解

MySQL数据库初始化mysql数据库： 1. 安装mysql 可以前往oracle官网下载，装包后就可以启动服务mysqld了 2. mysql安装后初始密码在/var/log/mysqld.log，可以用下面命令获取密码(必须是启动服务后才会有)awk '/temporary password/{print $11}' /var/log/mysqld.log ...

2018-10-28 22:06:25 781

零散知识点：基本的命令集合、Linux基本常识、yum搭建、网络配置（链路聚合）、磁盘分区（格式化和虚拟内存）、权限分析、压缩备份、shell脚本、SELinux和防火墙、别名、vim的一些使用技巧、源码包编译安装、RAID阵列卡、进程管理、破解root密码、实时同步（监听与同步）服务：Apache的web服务以及https安全web服务、FTP共享服务、邮件服务、samba服务、NFS共享服...

2018-08-30 20:35:51 1336

原创浅谈char字符类型和string字符串类型

char和string 两者关系很微妙，因为都是字符，但是他们直接的联系却不是很多，这里我和大家聊聊字符的两大势力的相爱相杀。char也就是字符型数据定义，string也就是字符串类型数据定义，乍一看他们很想，一个是字符一个是字符串，字符串不就是字符串起来得到的吗？但是事实上，字符串即是“字符”串起来也不是“字符”串起来，听起来是不是很奇怪，这里面的两个字符的意义其实是不一样的，第一个“字符”

2018-01-26 20:58:49 47685 1

原创 golang 学习笔记

文章目录配置go环境goland(IDE)快捷操作导入包集合导入包数据函数函数指定返回值函数值指定返回数据类型闭包变量变量类型设定定义变量变量初始化赋值变量类型特殊运算类型装换获取变量常量定义循环基本for循环(同C++的for)初始值和数据变化模块可以不写(同C++的while)死循环用range和数组相结合判断switch - case延迟函数指针结构体结构体指针go没有类的说法,但是可以就结...

2019-05-21 15:12:49 425

原创 Kubernetes基本知识、分布式搭建详解、踩坑排错案例

一、Kubernets简介Kubernetes是一个稳定高效的开源平台，帮助您确保这些容器化应用程序随时随地运行，并帮助他们找到工作所需的资源和工具。协调一个高度可用的计算机集群，而Kubernets就是将底层的计算资源连接在一起，对外体现为一个高可用的计算机集群。主要是为容器进行集群的一些自动化操作，可以实现容器集群的自动化部署、自动扩缩容、维护等功能。而简称K8s来源就是将8个字母“uber...

2019-01-30 15:51:47 1222

原创 Git基本命令集合

Git的操作原理一个gitlib服务器有远程的分支以及存储设备，客户端操作，首先是从远端分支将数据下载到本地分支，然后进行修改、添加、删除的相关操作，随后在本地的分支中进行一次添加暂存提交的操作，再将分支推送上传到远端服务器，最后进行多分支合并操作。对于分支，可以理解为创建一个账户，每个不同的分支都是不同的修改进度，但最后都要进行合并操作，合并到主线中，也就是master分支，这个分支在大部分...

2019-01-24 14:59:35 275

原创对api接口进行管理的软件——YAPI

YAPI是由由哪哪儿网大前端技术中心（YMFE）团队设计用于进行api接口管理的软件产品，其拥有权限管理，可视化接口管理，易用的模拟服务器，自动化测试，数据导入，插件机制，计在为开发，产品，测试人员提供更优雅的接口管理服务。可以帮助开发者轻松创建，发布，维护API。下面主要来具体阐述如何构建一个雅皮平台软件，参考文档https://yapi.ymfe.org/devops/index.html...

2018-12-18 18:31:39 4418

原创 Linux的数据文件类型——JSON、YAML、JinJa2

JSON文件格式简介： JSON是JavaScript对象表示法,它是一种基于文本独立于语言的轻量级数据交换格式 JSON中的分隔符限于单引号" ' " 双引号 " ' " 用来规划一个数据值小括号" () " 分组使用中括号" [ ] " 定义一个数组，用逗号分隔 [ "k1":"v1" , "k2" ,

2018-11-26 22:30:26 1327

原创 Linux大型架构——ELK解决方案

文件描述符 0 代表标准输入 1 代表标准输出 2 代表错误输出定义一个重定向文件描述符exec 数字>f1 使用一个重定向文件描述符echo asd >& 数字删除文件描述符exec 数字>&- 用重定向脚本达成curl命令的功能#!/bin/bashURL=${1:-"www.ba...

2018-11-23 21:51:47 2446

原创 Linux大型架构——ansible服务器的搭建和基本使用

选择一款配置管理软件的六大分析方向 1. 活跃度(社区) 2. 学习成本 3. 使用成本 4. 编码语言 5. 性能 6. 使用是否广泛ansible特点 1. 模块化设计,调用特定的模块完成特定任务 2. 基于Python语言实现，支持paramiko、PyYAML (半结构化语言)、Jinja2 3. 其模块支持JSON等标准输出格式,...

2018-11-21 21:08:04 1089

原创 Linux云计算——Docker容器管理器

Docker理论知识 Docker是容器管理系统，也是一个进程，而容器是Linux内核的一个功能模块，不过Docker使用的时候和虚拟机差不多，但不是虚拟机。工作原理：在磁盘网络等资源中取出一部分进行隔离，在这规定的范围里面进行特定的操作，其所有操作依然是使用的是真机的Linux操作系统，只不过是真机开启一个进程，而Docker就是以这个进程为上帝进程进行后续的操作。 ...

2018-11-19 20:59:34 686

原创 Linux云计算——IaaS服务的OpenStack

云计算简介基于互联网的相关服务的增加、使用和交付的一个模式这种模式提供可用的、便捷的、按需的网络访问，进入可配置的计算资源共享池分为IaaS(后端基础服务，包含公有云、私有云、混合云)、PaaS(开发平台服务)、SaaS(市场应用平台)OpenStack OpenStack是一个由NASA(美国国家航空航天局)和Rackspace合作研发并发起的项目，就是一套Ia...

2018-11-15 22:06:41 862

原创 Linux云计算——KVM虚拟化、后端复用、virsh命令、快速搭建虚拟机

显示英文版本帮助LANG=en_US.UTF-8 命令 --help显示中文版本帮助LANG=zh_CN.UTF-8 命令 --help虚拟化定义：把一个或者多个物理资源转换成一个或者多个逻辑资源，这些逻辑资源就可以用来创建虚拟机详细解释：可以一个物理机中创建多个虚拟机，也可以多个物理机转换成一个虚拟机，但是因为网络速度远远打不到CPU的运行速度，所以一...

2018-11-13 20:33:01 1307

原创 Linux安全基本知识——zabbix

Zabbix 监控服务 0. 环境准备：在zabbix服务器上搭建lnmp服务，让zabbix监控用网页展示出来 0.1 安装nginx，并修改主配置http {…… fastcgi_buffers 8 16k; fastcgi_buffer_size 32k; fastcgi_connect_timeout 300; fastcgi...

2018-11-10 19:23:43 541

原创 Linux安全基础——day4——审计、服务安全

系统审计简介：基于事先配置的规则生成日志，记录可能发生在系统上的事件，但是审计不会为系统提供额外的保护，致使会发现并记录违反安全策略的人以及对应的行为。日志内容：日期与事件、事件结果、触发事件的用户、所有认证机制的使用、对关键数据的修改行为部署audit 装包： audit(默认系统已经安装好了)/etc/audit/auditd.conf 配置文件...

2018-11-08 22:47:00 1487 1

原创 Linux安全基础——day3——抓包、防火墙

TcpDump抓包使用的软件包是： tcpdump 使用命令： tcpdump 选项过滤条件-i 指定监控的网络接口 -A 方便阅读 -c 设定抓取几个包的时候停止 -w 将抓取的数据包信息存储到指定文件中，一般文件后缀名为 .cap -r 从指定文件中读取数据包信息过滤条件 host 主机 net 网...

2018-11-07 19:45:29 1378

原创 Linux安全基础——day2——NMAP

ftp共享服务基本配置就不细述，主要将一下，如何实现允许匿名登陆上传数据只需要再服务器上修改配置文件/etc/vsftpd/vsftpd.conf ，再重启服务sed -i '/anon_upload_enable/canon_upload_enable=YES' /etc/vsftpd/vsftpd.conf 客户端使用ftp命令访问ftp服务器...

2018-11-06 22:06:38 456

原创 Linux安全基础——day1

进行安全配置的思路 1. 非技术手段：管理制度(核实设备安全、网络物理连接) (社会工程学) 2. 技术手段：系统安全(权限限定) 服务安全(优化，高可用) 数据安全(备份) 网络安全(加密)/etc/passwd 用户信息 /etc/shadow 用户密码数据(加密过) /etc/group 组信息 /etc/gshadow...

2018-11-05 22:38:21 1414 2

原创 Linux数据库管理——day15——MongoDB副本集、管理副本集

MongoDB副本集副本集其实就是拥有高可用的主从同步优点： 1. 提高数据可用性、安全性、方便数据故障恢复 2. 支持故障自动切换、自动修复成员节点 3. 拥有高可用的特性工作过程：主库记录所有操作在日志oplog中，从节点定期轮询主节点获取这些操作，然后对自己的数据库复本执行这些操作，从而保证从节点的数...

2018-11-03 22:19:18 325

原创 Linux数据库管理——day14——MongoDB数据库

mongodb数据库mongodb和mysql的类比： MongoDB MySQL 库库集合表文档行字段列严格区分大小写，和mysql不同 1. 初始安装： 1.1 解压包，然后创建一个工作目录 1.2 在工作目录下创建一个 etc log data 和 data/db 这些目录...

2018-11-02 22:08:24 281

原创 Linux数据库管理——day13——Redis的主从同步、数据格式

主从同步原理：从库向主库发送同步请求(sync)，接收到后启动一个程序进行后台存储，然后把保存的rdb文件发给从库，然后从库读取文件实现同步，之后主库每进行一次写操作就会启动一个程序，把修改命令发给从库，实现实时同步配置：所有库都默认拥有主库的配置，所以配置主从只需要从库进行配置即可查看当前状态(role:后面写的就是主库或者从库 ma...

2018-11-01 21:52:52 233

原创 Linux数据库管理——day12——Redis数据库集群、Ruby软件简析

部署redis集群 1. 将redis部署进入集群 1.1 修改主配置文件/etc/redis/6379.confsed -i 's/# cluster-enabled/cluster-enabled/' /etc/redis/6379.confsed -i '/cluster-node-timeout/ccluster-node-timeout 5000' /etc/...

2018-10-31 08:42:23 253

原创 Linux数据库管理——day11——NoSQL的Redis数据库、内存策略简析

NoSQL 全名 Not Only SQL 指的是非关系型数据库部署 Redis 服务 1. 安装 Redis 对源码包进行编译安装，资源中的包解压后即可编译安装，不需要配置，因为已经生成了一个Makefile文件 2. 配置初始化：运行脚本程序源码包解压位置/utils/install_server.sh # 定义端口号Please s...

2018-10-29 22:45:01 266

原创 Linux数据库管理——day10——分库分表、数据库硬件优化

分库分表分库分表也称作分片技术，主要作用是将存放在一个数据库中的数据按照特定的方法进行拆分，分散存放在多个数据库中，以达到分散多台设备实现负载均衡垂直分割纵向切分，把一个表的表结构拆分开来，形成多个表实质上就是把一个表的表结构中的多个字段拆成多个组合，每个组合都自成一个表水平分割横向切分，把一个表的表记录切分成多个表...

2018-10-27 22:59:10 1095 1

原创 Linux数据库管理——day9——视图、存储过程、判断循环

视图视图：视图是一个虚拟表，可以对视图执行对表的所有操作，只是内容和真实表相似，它并不是在数据库中一存储的信息存在每个视图都对应相应的一个或者多个基表，而这基表就是视图中所有数据真正意义上存储的地方视图的主要作用需要把一个表中几个字段单独列出，方便进行赋权等操作的时候进行操作视图的优点 1. 简单：视图的数据都是过滤...

2018-10-26 23:53:29 227

原创 Linux数据库管理——day8——MHA集群、MySQL

perl语言编写的安装包 1. 解压包 2. 解决配置依赖，配置perl Makefile.PL 如果出现报错信息，根据报错 Can't locate 后面的名字，用yum search 查找相关包，并安装，解决依赖然后再配置，循环直到配置成功配置成功的标志是每个包后面都有括号，显示相应的版本号 3. 编译安装mak...

2018-10-24 22:04:19 355

原创 Linux数据库管理——day7——读写分离

读写分离原理：两个服务器，进行主从同步，然后客户端访问调度服务器，写操作交给主库处理，读操作交给从库操作构建思路：搭建好MySQL主从配置，添加一个MySQL代理服务器，客户端通过代理主句访问MySQL数据库配置：三个服务器主从同步数据库(配置如上) 调度服务器： 1. 装包 maxscale 2. 配置...

2018-10-23 22:42:10 301

原创 Linux数据库管理——day6——主从同步服务

主从同步原理：主库通过开启binlog日志功能，然后从库IO进程监听主库binlog的当前偏移量，如果不同就获取日志信息，并让从库执行这日志中的命令工作过程：首先做出从同步前，两个库的数据结构必须一模一样，然后主库开启binlog功能，当有一个修改指令生效后，binlog就会被修改，当其被修改，其当前的pos偏移量就会变化，这时候从库的IO进程发现，偏移量和自己记录的不...

2018-10-22 22:04:34 286

原创 Linux数据库管理——day5——数据库备份和回复、percona增量备份

数据库备份策略完全备份备份所有的数据物理备份采用的就是完全备份增量备份备份上次备份后，所有新的数据差异备份备份上次完全备份后，所有新的数据增量备份和差异备份的区别：增量备份是根据上一次备份后进行备份，不管什么备份都算，所以不会出现冗余备份而差异备份，是从上一次完全备份开始备份，也就是说，上次完全备份后...

2018-10-20 21:57:11 379

原创 Linux数据库管理——day4——多表查询、phpMyAdmin管理工具、修改数据库用户密码、用户授权

复制表主要作用：备份表、快速建表语法： create table 表名 SQL查询语句# 备份一个表的所有数据create table 表名 select * from 被备份的表;# 以一个表的表结构为模型创建一个新表，但不要数据create table 表名 select * from 模型表名 where false;# 具体选择某些字段，某几行...

2018-10-19 21:59:41 770

原创 Linux数据库管理——day3——存储引擎、匹配条件、select完整命令

SQL知识点 1. 在查询中用 % 实现统配，可在所在位置匹配任意多个(包括0个)任意字符 2. 添加一个字段值为 '' 代表0个字符，不是空只有 NULL 代表字段为空MySQL体系结构的8个组件：组件介绍连接池接口接收命令分析器检查语法正确性和是否拥有访问权限优化器做基本的存储检索的优化查询缓...

2018-10-17 22:44:56 255

原创 Linux数据库管理——day2——基本约束、主外键

使用时间函数获得函数now() 获得当前时间的日期对应datatime类型 year(字符串) 获得后面字符串中指定的年对应year类型 month(字符串) 获得后面字符串中指定的月 date(字符串) 获得后面字符串中指定的日对于date类型 time(字符串) 获得后面字符串中指定的时间对于time类型 s...

2018-10-17 00:29:08 235

原创 Linux数据库管理——day1——安装MySQL、基本增删改查操作

数据库：DB 数据库依照某个数据模型进行组织并存放到存储器中 DBMS 数据库管理系统用来控制和管理数据的服务软件 DBS 数据库系统 DB+DBMS=DBS，是一个计算机系统 MySQL (端口号3306) 特点 1. 适用于中小规模、关系数据库系统 2. 支持Linux和Windows等多操作系统 ...

2018-10-15 22:03:24 307

原创 Linux集群存储——day5——Ceph集群上部署Linux系统、Ceph文件系统、Ceph的对象存储系统

Ceph集群存储的应用红帽的Linux已经把Ceph集成到内核中了，可以直接把操作系统装在分布存储文件中。将虚拟机的Linux操作系统安装在Ceph集群中： 0. 如同Ceph集群进行初期环境部署。 1. 在ceph存储中部署出一个镜像用来存储操作系统 2. 创建一个新的虚拟机，但是不装操作系统 3. 配置libvirt secret (...

2018-10-12 21:16:51 619

原创 Linux集群存储——day4——Ceph分布式存储搭建、OSD块存储、COW快照、RBD存储镜像

Ceph的专有名词 OSDs 存储设备 Monitors 集群监控组件 MDSs 存放文件系统的元数据部署Ceph分布式存储 Ceph集群中一般是一个管理服务器(control)多个存储服务器(node)，所以下面所有关于存储服务器的操作都需要对每个存储器进行操作(主机名为node1的操作需要在每个存储服务器上进行一次)0. 部署前准备工作： ...

2018-10-11 22:17:03 669

原创 Linux集群存储——day3——keepalived的高可用服务、HAProxy的负载均衡服务

端口监测 nmap 命令进行测试需要装包 nmap 可以进行检测具体的IP的某个端口nmap -sS -n -p 端口检测的主机IP | grep open[ $? -eq 0 ] && echo 端口开放 || echo 端口未开放HA 高可用集群软件名：keepalived 服务： keepalived 主...

2018-10-10 23:06:07 377

原创 Linux集群存储——day2——集群LB负载均衡 LVS/NAT、LVS/DR 模式

集群：集群目的：提高性能、降低成本、提高可扩展性、增强可靠性HPC 高性能计算集群反复进行一个计算，一般用于科研等需要精算的领域 LB 负载均衡集群多台机器提供一个服务，一个访问可以给后面多个服务器中任意一个，实现平衡负载用 LVS、HAproxy、nginx 等软件实现 HA 高可用集群做备份，...

2018-10-10 21:58:45 591

原创 Linux集群存储——day1——udev管理技术、多路径服务

存储技术分为：直连式存储，网络存储直连存储 SCSI接口(双绞线) 小型计算接口、其接口对应的系统中的磁盘名是 sd开头 DAS技术将存储设备通过SCSI接口或者光纤通道链接计算机优点：存储速度综合较快，短距离中性价比高缺点：不能数据共享，在数据量巨大的时候，其性能下降较快网络存储 NAS 是一个专用数据存储服务器，属于一个用于数据共享的...

2018-10-08 23:49:28 600

原创 Shell-case：服务nginx的安装脚本

之前分享了不少脚本中的使用的小技巧，今天拿出点实打实的东西来，在我的 github https://github.com/SmartLyu/shell 里有 nginx 的一个安装配置包，还有一个关于安装 nginx 的脚本，今天就来和大家分享一下我写的nginx相关的脚本，大致分为安装脚本、服务控制脚本、自动同步等。先来说说安装脚本nginx_install 大家解压...

2018-10-05 17:14:53 318

原创 Shell-case：集群中服务器间实时同步

今天和大家分享一个比较常见的技术，实时同步技术，在集群中，很多设备的内容都是一样的，装的时候可以用克隆的方法，但后来有的时候需要进行修改，我们就要一模一样的操作每个机子，这就很麻烦，我们就希望可以修改其中一个机子后，自动同步到其他服务器上，这时候就要用到 rsync 同步技术，我们知道rsync可以同步，但是怎么做实时同步呢？话不多说代码奉上：Watch_Root=需要同步的目录...

2018-10-04 21:43:36 224