日常相关问题

wuhoney123

已于 2023-07-07 14:17:23 修改

阅读量45

点赞数

分类专栏：运维开源软件文章标签：运维

于 2023-06-13 10:15:33 首次发布

本文链接：https://blog.csdn.net/qq_57140319/article/details/131181958

版权

运维开源软件专栏收录该内容

6 篇文章 0 订阅

订阅专栏

kubernetes(k8s)的工作机制

Kubernetes是一个开源的容器编排平台，可以自动化地部署、扩展、管理和操作容器化应用程序。其工作机制主要包括以下几个方面：

资源对象：Kubernetes管理的最基本单位是资源对象，包括Pod、Service、Deployment等。每个资源对象都有自己的配置文件，可以通过kubectl命令行工具或API进行创建、修改、删除等操作。

控制器：Kubernetes控制器负责监控资源对象的状态，如果发现状态与期望不符，则会自动进行调整以使状态达到期望状态。例如，Deployment控制器可以自动创建、删除或更新Pod，以实现应用程序的水平扩展和滚动升级。

调度器：Kubernetes调度器负责将Pod调度到可用的节点上，并确保满足Pod的资源需求和亲和性策略。

API服务器：Kubernetes API服务器是Kubernetes群集的控制中心，所有操作都通过API服务器进行。API服务器接收来自kubectl或其他客户端的请求，然后向Etcd数据库写入或读取状态信息。

Etcd数据库：Kubernetes使用Etcd数据库来存储集群的状态信息，包括资源对象、控制器、调度器等。Etcd是一个分布式键值存储系统，可以高效地存储和检索数据。

容器运行时：Kubernetes可以与多种容器运行时集成，包括Docker、CRI-O、Containerd等。容器运行时负责启动和管理容器，并与Kubernetes API服务器通信以报告容器状态和获取指令。

docker容器化相关操作指令

Docker是一种容器化平台，可以将应用程序和所有依赖项打包到一个容器中，并在任何地方快速部署。以下是一些常用的Docker操作指令：

docker run: 启动一个新的容器

docker run [OPTIONS] IMAGE [COMMAND] [ARG...]

docker stop: 停止正在运行的容器

docker stop [OPTIONS] CONTAINER [CONTAINER...]

docker ps: 列出正在运行的容器

docker ps [OPTIONS]

docker images: 列出本地已安装的镜像

docker images: 列出本地已安装的镜像

docker build: 从Dockerfile构建一个新的镜像

docker build [OPTIONS] PATH | URL | -

docker push: 将本地镜像推送到Docker Hub

docker push [OPTIONS] NAME[:TAG]

docker pull: 从Docker Hub拉取镜像

docker pull [OPTIONS] NAME[:TAG]

docker rm: 删除一个或多个容器

docker rm [OPTIONS] CONTAINER [CONTAINER...]

docker rmi: 删除一个或多个镜像

docker rmi [OPTIONS] IMAGE [IMAGE...]

docker exec: 在正在运行的容器中执行命令

docker exec [OPTIONS] CONTAINER COMMAND [ARG...]

dockerfile相关操作指令

Dockerfile 是用于构建 Docker 镜像的脚本，并使用一些指令指示 Docker 如何构建镜像。以下是常用的 Dockerfile 指令：

FROM：指定基础镜像。
RUN：在镜像中运行指定的命令，用于安装软件包等。
COPY：将指定文件或目录从构建上下文复制到容器中。
ADD：功能类似于 COPY，还支持从 URL 复制并自动解压缩等操作。
CMD：设置容器启动时要执行的默认命令。
ENTRYPOINT：设置容器启动时要执行的入口程序，可以与 CMD 配合使用。
ENV：设置环境变量。
EXPOSE：声明容器将监听哪些端口。
WORKDIR：设置容器的当前工作目录。
USER：设置容器中应该使用的用户名或 UID。
VOLUME：创建一个挂载点，使容器可以访问主机上的目录或文件。
以上是常用的 Dockerfile 指令，还有其他指令可以在官方文档中查看。

nginx、mysql、postgres、redis、rabbitmq、kafka的集群部署方案

针对每一个软件的集群部署，主要考虑以下几个方面：
架构选择：选择适合当前业务场景的架构，如主从架构、集群架构等。
服务器选择：选择性能稳定、故障率低的服务器。
资源规划：各种资源的分配和使用。
监控和管理：设置监控和管理系统，保证系统稳定运行。
下面是各软件的集群部署方案：
nginx
Nginx的集群部署可以采用负载均衡的方式，通过多个主机的Nginx配置反向代理，将请求分发到不同的节点上。也可以通过Nginx Plus的Stream模块实现TCP和UDP的负载均衡。
mysql
MySQL可以采用主从复制和主主复制的方式进行集群部署。主从复制只读从库，主库写，从库读。主主复制则允许任何一个节点进行写入操作，同时保证数据同步。
postgres
PostgreSQL也可以采用主从复制和主主复制的方式进行集群部署。其中主从复制可以通过设置热备恢复模式实现，主主复制可以采用BDR插件和PGPOOL实现。
redis
Redis的集群可以采用主从复制、Cluster模式和Sentinel模式。其中主从复制和Sentinel模式适用于简单场景，Cluster模式则可以实现高可用和扩展性。
rabbitmq
RabbitMQ的集群可以采用多个节点的镜像集群，保证消息队列的高可用性。通过自动选主机制，可以实现主从切换，保证系统稳定运行。
kafka
Kafka的集群可以采用分布式架构，通过多个broker节点进行数据存储和分发。同时，通过Zookeeper实现broker节点的选主和状态管理，保证系统稳定性

nginx负载均衡、代理、web相关配置

Nginx 是一个高性能的 Web 服务器和反向代理服务器，可以用于负载均衡、代理和 Web 服务器等多种应用场景。下面分别介绍 Nginx 的负载均衡、代理和 Web 相关配置。

负载均衡配置
Nginx 可以通过 upstream 模块实现负载均衡，upstream 模块可以将请求转发到多个后端服务器，并支持多种负载均衡算法。下面是一个简单的负载均衡配置示例：

upstream backend {
    server backend1.example.com;
    server backend2.example.com;
    server backend3.example.com;
}
server {
    listen 80;
    server_name example.com;
    location / {
        proxy_pass http://backend;
    }
}

在上述配置中，我们首先定义了一个名为 backend 的 upstream，将请求转发到三个后端服务器。接着定义了一个 server，监听 80 端口，处理 example.com 的请求，并将请求转发到 backend upstream。这样，Nginx 就可以将来自客户端的请求转发到多个后端服务器并实现负载均衡。
代理配置
Nginx 可以作为反向代理服务器，将来自客户端的请求转发到后端服务器，并返回后端服务器的响应结果。下面是一个简单的反向代理配置示例：

server {
    listen 80;
    server_name example.com;
    location / {
        proxy_pass http://backend;
    }
}

在上述配置中，我们定义了一个 server，监听 80 端口，处理 example.com 的请求，并将请求转发到名为 backend 的后端服务器。这样，Nginx 就可以作为反向代理服务器，将客户端的请求转发到后端服务器，并返回后端服务器的响应结果。
Web 相关配置
Nginx 还可以配置多种 Web 相关的功能，如 SSL/TLS 加密、HTTP/2、gzip 压缩等。下面是一个简单的 SSL/TLS 加密和 gzip 压缩配置示例：

server {
    listen 443 ssl http2;
    server_name example.com;
    ssl_certificate /path/to/cert.pem;
    ssl_certificate_key /path/to/key.pem;
    gzip on;
    gzip_types text/plain text/css application/json application/javascript;
    location / {
        proxy_pass http://backend;
    }
}

在上述配置中，我们定义了一个 server，监听 443 端口，开启 SSL/TLS 加密和 HTTP/2 协议，并指定了 SSL 证书和私钥文件。接着开启了 gzip 压缩，并指定了需要压缩的 MIME 类型。最后将请求转发到名为 backend 的后端服务器。这样，Nginx 就可以为 Web 应用程序提供 SSL/TLS 加密和 gzip 压缩等功能。

mysql、postgres、redis，关系型数据库与非关系型数据库之间的增量、全量备份操作

MySQL、PostgreSQL 和 Redis 都是常用的开源数据库，下面分别介绍这三种数据库的增量备份和全量备份方法。
MySQL 数据库备份
MySQL 数据库的备份可以使用 mysqldump 工具，mysqldump 可以导出数据库的全量数据和增量数据。下面是 mysqldump 备份 MySQL 数据库的示例：
全量备份：

$ mysqldump -u [username] -p [database_name] > /path/to/backup.sql

增量备份：

$ mysqldump -u [username] -p [database_name] --where="update_time >= now() - interval 1 day" > /path/to/incremental_backup.sql

其中，-u 和 -p 参数分别指定了 MySQL 数据库的用户名和密码，–where 参数指定了增量备份的条件。
2. PostgreSQL 数据库备份
PostgreSQL 数据库的备份可以使用 pg_dump 工具，pg_dump 可以导出数据库的全量数据和增量数据。下面是 pg_dump 备份 PostgreSQL 数据库的示例：
全量备份：

$ pg_dump -U [username] -F c [database_name] > /path/to/backup.dump

增量备份：

$ pg_dump -U [username] -F c [database_name] --table=[table_name] --column-inserts > /path/to/incremental_backup.sql

其中，-U 参数指定了 PostgreSQL 数据库的用户名，-F 参数指定了备份文件的格式，–table 参数指定了增量备份的表名，–column-inserts 参数指定了导出数据时使用 INSERT INTO 语句。
3. Redis 数据库备份
Redis 数据库的备份可以使用 Redis 自带的 SAVE 命令和 BGSAVE 命令，SAVE 命令会阻塞 Redis 服务器并将数据写入磁盘，BGSAVE 命令会在后台进行备份。下面是 Redis 备份的示例：
全量备份：

$ redis-cli SAVE

增量备份：

$ redis-cli BGSAVE

其中，SAVE 命令将会在 Redis 服务器上阻塞，直到备份完成，因此不适合备份大量数据的 Redis 实例。BGSAVE 命令会在后台进行备份，备份过程中 Redis 服务器仍然可以处理请求，但备份可能会占用大量 CPU 和内存资源。备份完成后，可以使用 SAVE 命令检查备份文件是否存在。

关系型数据表设计规则

以下是一些关系型数据表设计规则：

设计表时要遵循第一范式（1NF）：表中的每一列都应该是一个单一的数据项，不可拆分。
遵循第二范式（2NF）：所有非主键字段都必须完全依赖于主键，而不是依赖于部分主键。
遵循第三范式（3NF）：表中的每一列都必须与主键直接相关，而不是与其他非主键字段相关。
使用适当的数据类型来存储数据，例如使用整数类型存储整数数据，而不是使用文本类型来存储。
遵循标准数据表命名规则，例如使用大写字母来区分不同的单词，使用下划线来分隔单词。
避免使用保留字作为列名或表名，以免与数据库系统的关键字发生冲突。
设计表时考虑数据的完整性和约束，例如设置主键，外键关系，检查约束等。
尽量避免使用冗余数据，以减少数据存储空间和提高数据更新效率。
考虑表之间的关系，使用外键关联不同表之间的数据，避免数据冗余。
设计表时尽可能地简化表结构，减少表中的复杂性，提高数据查询效率。