kafka
saga_gallon
霓虹开满夜空,月光洒满心间
展开
-
kafka 经典入门
问题导读1.Kafka独特设计在什么地方?2.Kafka如何搭建及创建topic、发送消息、消费消息?3.如何书写Kafka程序?4.数据传输的事务定义有哪三种?5.Kafka判断一个节点是否活着有哪两个条件?6.producer是否直接将数据发送到broker的leader(主节点)?7.Kafa consumer是否可以消费指定分区消息?8.Kafka消息是转载 2016-06-13 11:50:22 · 2236 阅读 · 1 评论 -
Kafka 设计与原理详解
一、Kafka简介1.1 背景历史当今社会各种应用系统诸如商业、社交、搜索、浏览等像信息工厂一样不断的生产出各种信息,在大数据时代,我们面临如下几个挑战:如何收集这些巨大的信息如何分析它如何及时做到如上两点以上几个挑战形成了一个业务需求模型,即生产者生产(produce)各种信息,消费者消费(consume)(处理分析)这些信息,而在生产者与消费者之间,需要转载 2017-01-17 14:06:33 · 315 阅读 · 0 评论 -
kafka 常用命令
以下是kafka常用命令行总结:Step 1: 启动服务器首先启动zookeeper> bin/zookeeper-server-start.sh config/zookeeper.properties(远程启动的时候需要在后面加上一个 & 作为后台进程,然后断开和远程的链接)接着启动kafka服务器> bin/kafka-server-...原创 2017-01-18 14:19:58 · 2401 阅读 · 0 评论 -
彻底删除Kafka中的topic
1、删除kafka存储目录(server.properties文件log.dirs配置,默认为"/tmp/kafka-logs")相关topic目录2、Kafka 删除topic的命令是: ./bin/kafka-topics --delete --zookeeper 【zookeeper server】 --topic 【topic name】 如转载 2017-01-18 14:39:22 · 905 阅读 · 0 评论 -
kafka 集群安装配置
主机192.168.200.201192.168.200.202192.168.200.203一,先安装zookeeper ,每台主机都安装使用脚本,更改 myid 的值, 1对应200.201 ,2对应200.202,3对应200.203```#!/bin/bashcd /data/ && wget http://archive.apache.org/dis...原创 2019-06-18 09:54:57 · 247 阅读 · 0 评论