大数据
文章平均质量分 90
lady_killer9
CKA、CKS证书持有者,安全工程师
展开
-
Kafka入门,这一篇就够了(安装,topic,生产者,消费者)
任何发布到partition的消息都会被直接追加到partition尾部,每条消息的位置称为offset,offset是一个long型数字,它唯一标记一条消息。Kafka每个partition中的消息在写入是都是有序的,消费时,每个partition只能被每一个group中的消费者消费,因此,topic下只有一个partition时一定有序。topic的partition数量可以在创建时配置,partition数量决定了每个消费者组中并发消费者的。已发布的消息保存在一组服务器中,称为Kafka集群。原创 2023-09-10 10:42:28 · 978 阅读 · 1 评论 -
大数据-Hadoop集群搭建(配置免密登录及配置环境)
目录安装Hadoop集群布局克隆配置免密登录集群配置验证集群总结安装Hadoop上传压缩包。在hadoop用户下,新建一个apps目录,进入该目录。可以通过文件的属性中的安全选项卡找到完整路径,并复制,和安装jdk时一样,使用SecureCRT的sftp上传即可。文件路径解压在该目录下即可。解压可以看到hadoop里面的内容,在sbin目...原创 2019-08-28 16:53:14 · 3251 阅读 · 2 评论