kafka_3(1)，太牛了

-v /etc/localtime:/etc/localtime
bitnami/kafka:3.7.0
EOF

bash ${path}/start.sh

四、 kafka测试

docker exec -it kafka bash

#创建topic
kafka-topics.sh --create --bootstrap-server 192.168.11.100:9092,192.168.11.101:9092,192.168.11.102:9092 --topic test --command-config /opt/bitnami/kafka/config/sasl_config.properties

#生产
kafka-console-producer.sh --bootstrap-server 192.168.11.100:9092,192.168.11.101:9092,192.168.11.102:9092 --topic test --producer.config /opt/bitnami/kafka/config/sasl_config.properties
#消费
kafka-console-consumer.sh --bootstrap-server 192.168.11.100:9092,192.168.11.101:9092,192.168.11.102:9092 --topic test --consumer.config /opt/bitnami/kafka/config/sasl_config.properties

#扩容分区
kafka-topics.sh --bootstrap-server 192.168.11.100:9092,192.168.11.101:9092,192.168.11.102:9092 --alter --topic log-smartgate --partitions 3 --replication-factor 1 --command-config /opt/bitnami/kafka/config/sasl_config.properties

#查询分区
kafka-topics.sh --describe --bootstrap-server 192.168.11.100:9092,192.168.11.101:9092,192.168.11.102:9092 --topic test --command-config /opt/bitnami/kafka/config/sasl_config.properties

#acl ,需要在添加启动参数
kafka-acls.sh --bootstrap-server 192.168.11.100:9092,192.168.11.101:9092,192.168.11.102:9092 --add --allow-principal User:gohangout --operation ALL --topic test --command-config /opt/bitnami/kafka/config/sasl_config.properties

Adding ACLs for resource ResourcePattern(resourceType=TOPIC, name=test, patternType=LITERAL):
(principal=User:gohangout, host=*, operation=ALL, permissionType=ALLOW)

Current ACLs for resource ResourcePattern(resourceType=TOPIC, name=test, patternType=LITERAL):
(principal=User:gohangout, host=*, operation=ALL, permissionType=ALLOW)

#这三台配置是与ALC有关
#-e KAFKA_CFG_ALLOW_EVERYONE_IF_NO_ACL_FOUND=true
#-e KAFKA_CFG_SUPER_USERS=User:gohangout
#-e KAFKA_CFG_AUTHORIZER_CLASS_NAME=org.apache.kafka.metadata.authorizer.StandardAuthorizer \

#ACL有以下权限
Describe
DescribeConfigs
Alter
IdempotentWrite
Read
Delete
Create
ClusterAction
All
CreateTokens
DescribeTokens
Write
AlterConfigs

#查看ACL授权
kafka-acls.sh --bootstrap-server 192.168.11.103:9092 --list --command-config /opt/bitnami/kafka/config/sasl_config.properties

Current ACLs for resource ResourcePattern(resourceType=TOPIC, name=test, patternType=LITERAL):
(principal=User:gohangout, host=*, operation=ALL, permissionType=ALLOW)

四、安装redpanda

path=/data/kowl
mkdir -p ${path}/etc

cat > ${path}/etc/console.yaml << ‘EOF’
server:

listenAddress:

listenPort: 19002
logger:
level: info
analytics:
enabled: false
EOF

cat > ${path}/start.sh << ‘EOF’
docker rm -f kowl

cd $(dirname $0)
docker run -itd
–restart=always
–network host
–name kowl
–user 5000
–add-host=logaudit_kafka_01:192.168.11.100
–add-host=logaudit_kafka_02:192.168.11.101
–add-host=logaudit_kafka_03:192.168.11.102
-v /etc/localtime:/etc/localtime
-v pwd/etc/console.yaml:/app/console.yaml
-e KAFKA_BROKERS=“logaudit_kafka_01:9092,logaudit_kafka_02:9092,logaudit_kafka_03:9092”
-e KAFKA_TLS_ENABLED=false
-e KAFKA_SASL_ENABLED=true
-e KAFKA_SASL_USERNAME=gohangout
-e KAFKA_SASL_PASSWORD=“Gohangout#XXXX”
redpandadata/console:v2.4.5
-config.filepath /app/console.yaml

EOF

bash ${path}/start.sh

![在这里插入图片描述](https://img-blog.csdnimg.cn/direct/8db07f962d3d4003a5747d5e33baf0a8.png)







**自我介绍一下，小编13年上海交大毕业，曾经在小公司待过，也去过华为、OPPO等大厂，18年进入阿里一直到现在。**

**深知大多数大数据工程师，想要提升技能，往往是自己摸索成长或者是报班学习，但对于培训机构动则几千的学费，着实压力不小。自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！**

**因此收集整理了一份《2024年大数据全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友。**
![img](https://img-blog.csdnimg.cn/img_convert/b7416d69e307b4f074a76d700e3f0106.png)
![img](https://img-blog.csdnimg.cn/img_convert/52e37fd7ec03ae4ed606f76e45f6c40e.png)
![img](https://img-blog.csdnimg.cn/img_convert/137950833d8ca9d46a3aa08cee084645.png)
![img](https://img-blog.csdnimg.cn/img_convert/dc9d4bcb570b0dc577c3e23b21b3a4a3.png)
![img](https://img-blog.csdnimg.cn/img_convert/67c1fbb38aebd8c21ddd06c90ad05e9b.png)

**既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，基本涵盖了95%以上大数据开发知识点，真正体系化！**

**由于文件比较大，这里只是将部分目录大纲截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频，并且后续会持续更新**

**如果你觉得这些内容对你有帮助，可以添加VX：vip204888 （备注大数据获取）**
![img](https://img-blog.csdnimg.cn/img_convert/6ba3c7dc9746fa4e2cc5dd6f99844daa.png)

**一个人可以走的很快，但一群人才能走的更远。不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎扫码加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！**

链图片转存中...(img-5chd1YIJ-1712978014511)]

**一个人可以走的很快，但一群人才能走的更远。不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎扫码加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！**