Kafka、ES、Redis、Mysql等中间件部署到公网

呆呆智

于 2025-04-22 14:45:46 发布

阅读量400

点赞数 6

文章标签： kafka elasticsearch redis

本文链接：https://blog.csdn.net/2301_79584629/article/details/147421708

版权

要将 Kafka、Redis、MySQL、Sentinel 和 Elasticsearch (ES) 部署到公网并且配置账号密码进行访问控制，下面是一个具体的步骤和配置示例。每个服务都有自己的安全配置和网络配置方式，我会逐一处理。

1. Kafka 部署到公网并配置账号密码

步骤：

在云服务器或物理服务器上安装 Kafka。
配置 listeners 和 advertised.listeners，使 Kafka 能够通过公网访问。
配置 Kafka 的认证和授权，使用 SASL 或 SSL 来控制连接。

配置示例（server.properties）：

# 启用监听器
listeners=SASL_PLAINTEXT://0.0.0.0:9092
advertised.listeners=SASL_PLAINTEXT://<Your_Public_IP>:9092

# 配置 SASL 认证
listener.security.protocol.map=SASL_PLAINTEXT:SASL_PLAINTEXT
listeners=SASL_PLAINTEXT://0.0.0.0:9092

# 配置 SASL 机制
sasl.mechanism.inter.broker.protocol=PLAIN
sasl.enabled.mechanisms=PLAIN

# 启用认证
authorizer.class.name=kafka.security.auth.SimpleAclAuthorizer
super.users=User:admin

# Kafka 默认安全设置
inter.broker.listener.name=SASL_PLAINTEXT

配置完后，需要设置账号密码，通常 Kafka 的认证通过 JAAS 文件来完成。

kafka_server_jaas.conf：

KafkaServer {
   org.apache.kafka.common.security.plain.PlainLoginModule required
   username="admin"
   password="admin_password"
   user_admin="admin_password"
   user_user="user_password";
};

然后在 Kafka 启动时指定 JAAS 配置文件：

KAFKA_OPTS="-Djava.security.auth.login.config=/path/to/kafka_server_jaas.conf" kafka-server-start.sh /path/to/server.properties

2. Redis 部署到公网并配置账号密码

步骤：

安装 Redis。
配置 bind 和 requirepass 以限制公共访问。

配置示例（redis.conf）：

# 绑定到所有网络接口，使其能够通过公网访问
bind 0.0.0.0

# 启用密码保护
requirepass your_password_here

# 设置最大连接数限制
maxclients 10000

重新启动 Redis，使配置生效。

3. MySQL 部署到公网并配置账号密码

步骤：

安装 MySQL。
配置 MySQL 使其监听公网 IP。
配置用户和权限，确保只有具有特定账号的用户能够连接。

配置示例（my.cnf）：

[mysqld]
bind-address = 0.0.0.0   # 允许从所有 IP 访问

创建用户并配置权限：

CREATE USER 'username'@'%' IDENTIFIED BY 'your_password';
GRANT ALL PRIVILEGES ON *.* TO 'username'@'%' WITH GRANT OPTION;
FLUSH PRIVILEGES;

4. Sentinel 部署到公网并配置账号密码

步骤：

安装 Sentinel 并启动它。
配置 bind 和 requirepass，使其支持公网访问。

配置示例（sentinel.conf）：

# 绑定到所有网络接口
bind 0.0.0.0

# 设置密码
requirepass your_password_here

# 设置监控的主 Redis 节点
sentinel monitor mymaster <Redis_IP> 6379 2

5. Elasticsearch 部署到公网并配置账号密码

步骤：

安装 Elasticsearch。
配置 network.host 使其监听公网 IP。
配置用户名和密码（推荐使用 X-Pack 或其他安全插件来实现认证和授权）。

配置示例（elasticsearch.yml）：

network.host: 0.0.0.0  # 允许来自所有 IP 的连接
http.port: 9200

# 启用安全认证 (X-Pack)
xpack.security.enabled: true
xpack.security.authc.realms.file.file1.type: file
xpack.security.authc.realms.file.file1.order: 0

配置 Elasticsearch 用户：

bin/elasticsearch-users useradd <username> -p <password> -r superuser

6. 防火墙和安全设置

为了确保这些服务可以通过公网访问，还需要配置防火墙规则：

Kafka：需要在防火墙中开放 9092 端口。
Redis：需要开放 6379 端口。
MySQL：需要开放 3306 端口。
Sentinel：需要开放 Sentinel 默认端口 26379。
Elasticsearch：需要开放 9200 端口。

确保只允许特定的 IP 地址进行访问，以增加安全性。

例如，在防火墙中开启特定端口：

# 开启 Redis 端口
sudo ufw allow from <Allowed_IP> to any port 6379

# 开启 Kafka 端口
sudo ufw allow from <Allowed_IP> to any port 9092

# 开启 MySQL 端口
sudo ufw allow from <Allowed_IP> to any port 3306