2018年5月25日 linux运维学习日志

一周第一次课
1.1 学习之初
1.2 约定
1.3 认识Linux
1.4 安装虚拟机
1.5 安装centos7

一周第二次课
1.6/1.7 配置IP
1.8 网络问题排查

一周第三次课
1.9 使用PuTTY远程连接Linux
1.10 使用xshell连接Linux
1.11 PuTTY密钥认证
1.12 xshell密钥认证
#####################
给大家定个规矩：
当天任务务必要在第二天上午11点前完成，并回复专贴（发上你的笔记链接，要求可以直接点进去看）。
没有在11点前回复专贴或者不回复笔记的，都会扣10分，即使后期补上的也会扣5分。

一周第四次课
1.13 单用户模式
1.14 救援模式
1.15 克隆虚拟机
1.16 Linux机器相互登录

一周第五次课
2.1/2.2 系统目录结构
2.3 ls命令
2.4 文件类型
2.5 alias命令

二周第一次课
2.6 相对和绝对路径
2.7 cd命令
2.8 创建和删除目录mkdir/rmdir
2.9 rm命令

二周第二次课
2.10 环境变量PATH
2.11 cp命令
2.12 mv命令
2.13 文档查看cat/more/less/head/tail

二周第三次课
2.14 文件和目录权限chmod
2.15 更改所有者和所属组chown
2.16 umask
2.17 隐藏权限lsattr/chattr

二周第四次课
2.18 特殊权限set_uid
2.19 特殊权限set_gid
2.20 特殊权限stick_bit
2.21 软链接文件
2.22 硬连接文件

二周第五次课
2.23/2.24/2.25 find命令
2.26 文件名后缀

三周第一次课
2.27linux和windows互传文件
3.1 用户配置文件和密码配置文件
3.2 用户组管理
3.3 用户管理

三周第二次课
3.4 usermod命令
3.5 用户密码管理
3.6 mkpasswd命令

三周第三次课
3.7 su命令
3.8 sudo命令
3.9 限制root远程登录

扩展
sudo与su比较 http://www.apelearn.com/bbs/thread-7467-1-1.html 
sudo配置文件样例  www.opensource.apple.com/source/sudo/sudo-16/sudo/sample.sudoers
sudo -i 也可以登录到root吗？ http://www.apelearn.com/bbs/thread-6899-1-1.html

三周第四次课
4.1 df命令
4.2 du命令
4.3/4.4 磁盘分区
扩展学习    parted分区gpt格式  http://www.apelearn.com/bbs/thread-7243-1-1.html

三周第五次课）
4.5/4.6 磁盘格式化
4.7/4.8 磁盘挂载
4.9 手动增加swap空间

四周第一次课
4.10/4.11/4.12 lvm讲解
4.13 磁盘故障小案例

四周第二次课
5.1 vim介绍
5.2 vim颜色显示和移动光标
5.3 vim一般模式下移动光标
5.4 vim一般模式下复制、剪切和粘贴

四周第三次课
5.5 进入编辑模式
5.6 vim命令模式
5.7 vim实践

扩展
vim的特殊用法 http://www.apelearn.com/bbs/thread-9334-1-1.html
vim常用快捷键总结 http://www.apelearn.com/bbs/thread-407-1-1.html
vim快速删除一段字符 http://www.apelearn.com/bbs/thread-842-1-1.html
vim乱码 http://www.apelearn.com/bbs/thread-6753-1-1.html
小键盘问题 http://www.apelearn.com/bbs/thread-7215-1-1.html
vim加密  http://www.apelearn.com/bbs/thread-7750-1-1.html

四周第四次课
6.1 压缩打包介绍
6.2 gzip压缩工具
6.3 bzip2压缩工具
6.4 xz压缩工具

四周第五次课
6.5 zip压缩工具
6.6 tar打包
6.7 打包并压缩
看下这个帖子： http://ask.apelearn.com/question/5435

五周第一次课
7.1 安装软件包的三种方法
7.2 rpm包介绍
7.3 rpm工具用法
7.4 yum工具用法
7.5 yum搭建本地仓库（视频中ppt小错误： gpcheck改为gpgcheck，yum cean 改为 yum  clean）
扩展
1. yum保留已经安装过的包   http://www.360doc.com/content/11/0218/15/4171006_94080041.shtml
2. 搭建局域网yum源  http://ask.apelearn.com/question/7627

五周第二次课
7.6 yum更换国内源
7.7 yum下载rpm包
7.8/7.9 源码包安装
扩展
1. 配置yum源优先级  http://ask.apelearn.com/question/7168
2. 把源码包打包成rpm包   http://www.linuxidc.com/Linux/2012-09/70096.htm

五周第三次课
8.1 shell介绍
8.2 命令历史
8.3 命令补全和别名
8.4 通配符
8.5 输入输出重定向

五周第四次课
8.6 管道符和作业控制
8.7/8.8 shell变量
8.9 环境变量配置文件
扩展
bashrc和bash_profile的区别   http://ask.apelearn.com/question/7719

五周第五次课
8.10 shell特殊符号cut命令
8.11 sort_wc_uniq命令
8.12 tee_tr_split命令
8.13 shell特殊符号下
相关测验题目：http://ask.apelearn.com/question/5437
扩展
1. source exec 区别 http://alsww.blog.51cto.com/2001924/1113112
2. Linux特殊符号大全http://ask.apelearn.com/question/7720
3. sort并未按ASCII排序 http://blog.csdn.net/zenghui08/article/details/7938975

六周第一次课
9.1 正则介绍_grep上
9.2 grep中
9.3 grep下
扩展
把一个目录下，过滤所有*.php文档中含有eval的行
grep -r --include="*.php" 'eval' /data/

六周第二次课
9.4/9.5 sed

六周第三次课
9.6/9.7 awk
扩展
把这里面的所有练习题做一下
http://www.apelearn.com/study_v2/chapter14.html

六周第四次课
复习 
扩展
打印某行到某行之间的内容http://ask.apelearn.com/question/559
sed转换大小写 http://ask.apelearn.com/question/7758
sed在某一行最后添加一个数字http://ask.apelearn.com/question/288
删除某行到最后一行 http://ask.apelearn.com/question/213
打印1到100行含某个字符串的行 http://ask.apelearn.com/question/1048

六周第五次课
复习
扩展
awk 中使用外部shell变量http://ask.apelearn.com/question/199
awk 合并一个文件 http://ask.apelearn.com/question/493
把一个文件多行连接成一行 http://ask.apelearn.com/question/266
awk中gsub函数的使用 http://ask.apelearn.com/question/200
awk 截取指定多个域为一行 http://ask.apelearn.com/question/224
过滤两个或多个关键词 http://ask.apelearn.com/question/198
用awk生成以下结构文件 http://ask.apelearn.com/question/5494
awk用print打印单引号 http://ask.apelearn.com/question/1738
合并两个文件 http://ask.apelearn.com/question/945
awk的参考教程 http://www.cnblogs.com/emanlee/p/3327576.html

七周一次课
10.1 使用w查看系统负载
10.2 vmstat命令
10.3 top命令
10.4 sar命令
10.5 nload命令

七周二次课
10.6 监控io性能
10.7 free命令
10.8 ps命令
10.9 查看网络状态
10.10 linux下抓包
扩展tcp三次握手四次挥手 http://www.doc88.com/p-9913773324388.html
tshark几个用法：http://www.aminglinux.com/bbs/thread-995-1-1.html

七周三次课
10.11 Linux网络相关
10.12 firewalld和netfilter
10.13 netfilter5表5链介绍
10.14 iptables语法

扩展（selinux了解即可）
1. selinux教程  http://os.51cto.com/art/201209/355490.htm
2.selinux pdf电子书  http://pan.baidu.com/s/1jGGdExK

七周四次课
10.15 iptables filter表案例
10.16/10.17/10.18 iptables nat表应用

扩展
1. iptables应用在一个网段  http://www.aminglinux.com/bbs/thread-177-1-1.html
2. sant,dnat,masquerade   http://www.aminglinux.com/bbs/thread-7255-1-1.html
3. iptables限制syn速率  http://www.aminglinux.com/bbs/thread-985-1-1.html

七周五次课
10.19 iptables规则备份和恢复
10.20 firewalld的9个zone
10.21 firewalld关于zone的操作
10.22 firewalld关于service的操作

八周一次课
10.23 linux任务计划cron
10.24 chkconfig工具
10.25 systemd管理服务
10.26 unit介绍
10.27 target介绍
扩展
1. anacron  http://blog.csdn.net/strikers1982/article/details/4787226
2. xinetd服(默认机器没有安装这个服务，需要yum install xinetd安装）   http://blog.sina.com.cn/s/blog_465bbe6b010000vi.html
3. systemd自定义启动脚本  http://www.jb51.net/article/100457.htm

八周二次课
10.28 rsync工具介绍
10.29/10.30 rsync常用选项
10.31 rsync通过ssh同步

八周三次课
10.32/10.33 rsync通过服务同步
10.34 linux系统日志
10.35 screen工具

扩展
1. Linux日志文件总管logrotate  http://linux.cn/article-4126-1.html
2. xargs用法详解 http://blog.csdn.net/zhangfn2011/article/details/6776925    

九周第四次课
11.1 LAMP架构介绍
11.2 MySQL、MariaDB介绍
11.3/11.4/11.5 MySQL安装
扩展
mysql5.5源码编译安装   http://www.aminglinux.com/bbs/thread-1059-1-1.html
mysql5.7二进制包安装（变化较大）  http://www.apelearn.com/bbs/thread-10105-1-1.html

九周第五次课
11.6 MariaDB安装
11.7/11.8/11.9 Apache安装
扩展
apache dso  https://yq.aliyun.com/articles/6298
apache apxs  http://man.chinaunix.net/newsoft/ApacheMenual_CN_2.2new/programs/apxs.html
apache工作模式  http://www.cnblogs.com/fnng/archive/2012/11/20/2779977.html

十周第一次课
11.10/11.11/11.12 安装PHP5
11.13 安装PHP7
php中mysql,mysqli,mysqlnd,pdo到底是什么   http://blog.csdn.net/u013785951/article/details/60876816
查看编译参数  http://ask.apelearn.com/question/1295

十周第二次课
11.14/11.15 Apache和PHP结合
11.16/11.17 Apache默认虚拟主机

十周三次课
11.18 Apache用户认证
11.19/11.20 域名跳转
11.21 Apache访问日志
扩展 
apache虚拟主机开启php的短标签   http://ask.apelearn.com/question/5370

十周四次课
11.22 访问日志不记录静态文件
11.23 访问日志切割
11.24 静态元素过期时间
扩展 
apache日志记录代理IP以及真实客户端IP  http://ask.apelearn.com/question/960
apache只记录指定URI的日志  http://ask.apelearn.com/question/981
apache日志记录客户端请求的域名  http://ask.apelearn.com/question/1037
apache 日志切割问题  http://ask.apelearn.com/question/566

十一周一次课
11.25 配置防盗链
11.26 访问控制Directory
11.27 访问控制FilesMatch
扩展
几种限制ip的方法 http://ask.apelearn.com/question/6519
apache 自定义header  http://ask.apelearn.com/question/830
apache的keepalive和keepalivetimeout  http://ask.apelearn.com/question/556

十一周二次课
11.28 限定某个目录禁止解析php
11.29 限制user_agent
11.30/11.31 php相关配置
扩展
apache开启压缩  http://ask.apelearn.com/question/5528
apache2.2到2.4配置文件变更  http://ask.apelearn.com/question/7292
apache options参数  http://ask.apelearn.com/question/1051
apache禁止trace或track防止xss  http://ask.apelearn.com/question/1045
apache 配置https 支持ssl http://ask.apelearn.com/question/1029

十一周三次课
11.32 php扩展模块装安
扩展
apache rewrite教程 http://coffeelet.blog.163.com/blog/static/13515745320115842755199/   http://www.cnblogs.com/top5/archive/2009/08/12/1544098.html
apache rewrite 出现死循环 http://ask.apelearn.com/question/1043
php错误日志级别参考  http://ask.apelearn.com/question/6973
php开启短标签 http://ask.apelearn.com/question/120
php.ini详解  http://legolas.blog.51cto.com/2682485/493917

十一周四次课
复习LAMP

十一周五次课
复习LAMP

十二周一次课
12.1 LNMP架构介绍
12.2 MySQL安装
12.3/12.4 PHP安装
12.5 Nginx介绍

扩展
Nginx为什么比Apache Httpd高效：原理篇 http://www.toxingwang.com/linux-unix/linux-basic/1712.html
apache和nginx工作原理比较 http://www.server110.com/nginx/201402/6543.html
mod_php 和 mod_fastcgi以及php-fpm的比较   http://dwz.cn/1lwMSd
概念了解：CGI，FastCGI，PHP-CGI与PHP-FPM    http://www.nowamagic.net/librarys/veda/detail/1319/  https://www.awaimai.com/371.html

十二周二次课
12.6 Nginx安装
12.7 默认虚拟主机
12.8 Nginx用户认证
12.9 Nginx域名重定向

扩展
nginx.conf 配置详解  http://www.ha97.com/5194.html    http://my.oschina.net/duxuefeng/blog/34880
nginx rewrite四种flag  http://www.netingcn.com/nginx-rewrite-flag.html  http://unixman.blog.51cto.com/10163040/1711943

十二周三次课 
12.10 Nginx访问日志
12.11 Nginx日志切割
12.12 静态文件不记录日志和过期时间

十二周四次课
12.13 Nginx防盗链
12.14 Nginx访问控制
12.15 Nginx解析php相关配置
12.16 Nginx代理

扩展
502问题汇总  http://ask.apelearn.com/question/9109
location优先级 http://blog.lishiming.net/?p=100

十三周一次课
12.17 Nginx负载均衡
12.18 ssl原理
12.19 生成ssl密钥对
12.20 Nginx配置ssl

扩展 
针对请求的uri来代理 http://ask.apelearn.com/question/1049
根据访问的目录来区分后端的web http://ask.apelearn.com/question/920
nginx长连接  http://www.apelearn.com/bbs/thread-6545-1-1.html
nginx算法分析   http://blog.sina.com.cn/s/blog_72995dcc01016msi.html

十二周三次课
12.21 php-fpm的pool
12.22 php-fpm慢执行日志
12.23 open_basedir
12.24 php-fpm进程管理

十二周四次课
复习LNMP

扩展
nginx中的root和alias区别  http://blog.csdn.net/21aspnet/article/details/6583335  
nginx的alias和root配置  http://www.ttlsa.com/nginx/nginx-root_alias-file-path-configuration/
http://www.iigrowing.cn/shi-yan-que-ren-nginx-root-alias-location-zhi-ling-shi-yong-fang-fa.html   这个更详细

十二周五次课
复习LNMP

十三周一次课
13.1 设置更改root密码
13.2 连接mysql
13.3 mysql常用命令
扩展 
mysql5.7 root密码更改   http://www.apelearn.com/bbs/thread-7289-1-1.html
myisam 和innodb引擎对比  http://www.pureweber.com/article/myisam-vs-innodb/
mysql 配置详解： http://blog.linuxeye.com/379.html
mysql调优： http://www.aminglinux.com/bbs/thread-5758-1-1.html
同学分享的亲身mysql调优经历：  http://www.apelearn.com/bbs/thread-11281-1-1.html

十三周二次课
13.4 mysql用户管理
13.5 常用sql语句
13.6 mysql数据库备份恢复

扩展
SQL语句教程  http://www.runoob.com/sql/sql-tutorial.html
什么是事务？事务的特性有哪些？  http://blog.csdn.net/yenange/article/details/7556094
根据binlog恢复指定时间段的数据   http://www.centoscn.com/mysql/2015/0204/4630.html
mysql字符集调整  http://xjsunjie.blog.51cto.com/999372/1355013
使用xtrabackup备份innodb引擎的数据库  innobackupex 备份 Xtrabackup 增量备份 http://zhangguangzhi.top/2017/08/23/innobackex%E5%B7%A5%E5%85%B7%E5%A4%87%E4%BB%BDmysql%E6%95%B0%E6%8D%AE/#%E4%B8%89%E3%80%81%E5%BC%80%E5%A7%8B%E6%81%A2%E5%A4%8Dmysql
相关视频  
链接：http://pan.baidu.com/s/1miFpS9M 密码：86dx   
链接：http://pan.baidu.com/s/1o7GXBBW 密码：ue2f

十三周三次课
14.1 NFS介绍
14.2 NFS服务端安装配置
14.3 NFS配置选项

十三周四次课
14.4 exportfs命令
14.5 NFS客户端问题
15.1 FTP介绍
15.2/15.3 使用vsftpd搭建ftp

十三周五次课
15.4 xshell使用xftp传输文件
15.5 使用pure-ftpd搭建ftp服务
扩展
vsftp使用mysql存放虚拟用户并验证 http://www.aminglinux.com/bbs/thread-342-1-1.html
ftp的主动和被动模式  http://www.aminglinux.com/bbs/thread-961-1-1.html

十四周一次课
16.1 Tomcat介绍
16.2 安装jdk
16.3 安装Tomcat

扩展
java容器比较 http://my.oschina.net/diedai/blog/271367  
http://www.360doc.com/content/11/0618/21/16915_127901371.shtml
j2ee、j2se、ejb、javabean、serverlet、jsp之间关系 http://bbs.csdn.net/topics/50015576
tomcat server.xml配置详解  http://blog.csdn.net/yuanxuegui2008/article/details/6056754
tomcat常用数据库连接的方法  http://wjw7702.blog.51cto.com/5210820/1109263

十四周二次课
16.4 配置Tomcat监听80端口
16.5/16.6/16.7 配置Tomcat虚拟主机
16.8 Tomcat日志

扩展
邱李的tomcat文档 https://www.linuser.com/forum.php?mod=forumdisplay&fid=37
JAR、WAR包区别  http://blog.csdn.net/lishehe/article/details/41607725
tomcat常见配置汇总  http://blog.sina.com.cn/s/blog_4ab26bdd0100gwpk.html
resin安装 http://fangniuwa.blog.51cto.com/10209030/1763488/
1 tomcat  单机多实例
http://www.ttlsa.com/tomcat/config-multi-tomcat-instance/
2 tomcat的jvm设置和连接数设置
http://www.cnblogs.com/bluestorm/archive/2013/04/23/3037392.html
3 jmx监控tomcat
http://blog.csdn.net/l1028386804/article/details/51547408
4 jvm性能调优监控工具jps/jstack/jmap/jhat/jstat
http://blog.csdn.net/wisgood/article/details/25343845 
http://guafei.iteye.com/blog/1815222
5 gvm gc 相关
http://www.cnblogs.com/Mandylover/p/5208055.html
http://blog.csdn.net/yohoph/article/details/42041729

十四周三次课
说明：有不少同学不能一次性把实验做成功，这是因为还不熟悉，建议至少做3遍

17.1 MySQL主从介绍
17.2 准备工作
17.3 配置主
17.4 配置从
17.5 测试主从同步

有的同学，遇到主从不能正常同步，提示uuid相同的错误。这是因为克隆机器导致。
https://www.2cto.com/database/201412/364479.html

十四周四次课、五次课（1月24日、1月25日）
说明：这两天无新课，主要是扩充知识面
注意：这两天的任务，需要回专贴。需要你们通过看这些东西总结成自己的心得。 不能照搬，必须要自己理解，能看多少就看多少，看不完也没有关系，但一定要去理解。

不停库不锁表在线主从配置  http://seanlook.com/2015/12/14/mysql-replicas/
mysql主从常见问题   http://www.10tiao.com/html/706/201603/403220961/1.html
mysql主从延迟  http://f.dataguru.cn/thread-461916-1-1.html   
深入探究主从延迟 http://ningg.top/inside-mysql-master-slave-delay/
mysql主从不同步如何做   http://www.jb51.net/article/33052.htm
mysql 主主 http://www.cnblogs.com/ygqygq2/p/6045279.html
mysql-proxy 实现读写分离   http://my.oschina.net/barter/blog/93354 
mycat实现读写分离  http://www.th7.cn/db/mysql/201708/250280.shtml
atlas相关     http://www.oschina.net/p/atlas
mysql一主多从   http://blog.sina.com.cn/s/blog_4c197d4201017qjs.html
mysql环形主从 http://ask.apelearn.com/question/11437
cobar实现分库分表   http://blog.csdn.net/huoyunshen88/article/details/37927553
mysql分库分表方案 http://my.oschina.net/ydsakyclguozi/blog/199498
mysql架构演变  http://www.aminglinux.com/bbs/thread-8025-1-1.html
MHA架构  http://www.dataguru.cn/thread-457284-1-1.html
比较复杂的mysql集群架构  http://ask.apelearn.com/question/17026

十五周一次课
18.1 集群介绍
18.2 keepalived介绍
18.3/18.4/18.5 用keepalived配置高可用集群

扩展
heartbeat和keepalived比较http://blog.csdn.net/yunhua_lee/article/details/9788433  
DRBD工作原理和配置   http://502245466.blog.51cto.com/7559397/1298945
mysql+keepalived http://lizhenliang.blog.51cto.com/7876557/1362313

十五周二次课
18.6 负载均衡集群介绍
18.7 LVS介绍
18.8 LVS调度算法
18.9/18.10 LVS NAT模式搭建

扩展
lvs 三种模式详解  http://www.it165.net/admin/html/201401/2248.html 
lvs几种算法 http://www.aminglinux.com/bbs/thread-7407-1-1.html
关于arp_ignore和 arp_announce http://www.cnblogs.com/lgfeng/archive/2012/10/16/2726308.html
lvs原理相关的   http://blog.csdn.net/pi9nc/article/details/23380589

十五周三次课
18.11 LVS DR模式搭建
18.12 keepalived + LVS

扩展
haproxy+keepalived  http://blog.csdn.net/xrt95050/article/details/40926255
nginx、lvs、haproxy比较  http://www.csdn.net/article/2014-07-24/2820837
keepalived中自定义脚本 vrrp_script   http://my.oschina.net/hncscwc/blog/158746
lvs dr模式只使用一个公网ip的实现方法   http://storysky.blog.51cto.com/628458/338726

十五周四次课
19.1 Linux监控平台介绍
19.2 zabbix监控介绍
19.3/19.4/19.6 安装zabbix
19.5 忘记Admin密码如何做

十五周五次课 
19.7 主动模式和被动模式
19.8 添加监控主机
19.9 添加自定义模板
19.10 处理图形中的乱码
19.11 自动发现

扩展
zabbix监控交换机（思科） http://tryrus.blog.51cto.com/10914693/1789847
zabbix远程执行命令  http://www.ywnds.com/?p=6610
zabbix分布式部署  http://sfzhang88.blog.51cto.com/4995876/1364399
zabbix监控tomcat（版本有点老，大家只需要参考步骤，不能照搬）  http://www.jianshu.com/p/e3825a885a1b  http://www.fblinux.com/?p=616

十六周一次课
19.12 添加自定义监控项目
19.13/19.14 配置邮件告警
19.15 测试告警
19.16 不发邮件的问题处理

十六周二次课
20.1 shell脚本介绍
20.2 shell脚本结构和执行
20.3 date命令用法
20.4 shell脚本中的变量

十六周三次课
20.5 shell脚本中的逻辑判断
20.6 文件目录属性判断
20.7 if特殊用法
20.8/20.9 case判断 

十六周四次课
20.10 for循环
20.11/20.12 while循环
20.13 break跳出循环
20.14 continue结束本次循环
20.15 exit退出整个脚本

扩展
select用法 http://www.apelearn.com/bbs/thread-7950-1-1.html

十六周五次课
20.16/20.17 shell中的函数
20.18 shell中的数组
20.19 告警系统需求分析

十七周一次课
20.20 告警系统主脚本
20.21 告警系统配置文件
20.22 告警系统监控项目

十七周二次课
20.23/20.24/20.25 告警系统邮件引擎
20.26 运行告警系统

十七周三次课
20.27 分发系统介绍
20.28 expect脚本远程登录
20.29 expect脚本远程执行命令
20.30 expect脚本传递参数

十七周四次课
20.31 expect脚本同步文件
20.32 expect脚本指定host和要同步的文件
20.33 构建文件分发系统
20.34 批量远程执行命令

扩展：
shell多线程  http://blog.lishiming.net/?p=448

十七周五次课
复习shell脚本

扩展：
给你提供一本电子书 链接:http://pan.baidu.com/s/1mg49Taw 密码:yk4b
shell习题做一下  http://www.apelearn.com/study_v2/chapter15.html#shll
 

转载于:https://my.oschina.net/u/3866935/blog/1818454