kafka
文章平均质量分 50
Shall潇
空空如也
展开
-
Kafka---将kafka中的数据导入HBase
import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.HBaseConfiguration;import org.apache.hadoop.hbase.HConstants;import org.apache.hadoop.hbase.TableName;import org.apache.hadoop.hbase.client.*;import org.apache.hadoop.hbase.uti原创 2021-06-01 14:46:09 · 374 阅读 · 0 评论 -
Kafka---窗口函数
import org.apache.kafka.clients.consumer.ConsumerConfig;import org.apache.kafka.common.serialization.Serdes;import org.apache.kafka.streams.*;import org.apache.kafka.streams.kstream.*;import java.time.Duration;import java.util.Arrays;import java.uti原创 2021-05-31 21:41:23 · 390 阅读 · 0 评论 -
KafkaStreaming
kafkaStreaming 技术:将一个topic中的消息,进行处理,再写入另一个topic文章目录一、将一个Topic消息写入另一个Topic二、统计数字之和三、WordCount一、将一个Topic消息写入另一个Topic不做任何操作,只是将一个topic中的消息读取出来,写入另一个topic创建Topickafka-topics.sh --zookeeper hadoop100:2181 --create --topic mystreamingin --partitions 1 --r.原创 2021-05-27 15:30:53 · 248 阅读 · 0 评论 -
Kafka---生产者、消费者API
1、生产者package Kafka.stu;import org.apache.kafka.clients.producer.KafkaProducer;import org.apache.kafka.clients.producer.ProducerConfig;import org.apache.kafka.clients.producer.ProducerRecord;import org.apache.kafka.common.serialization.StringSerialize原创 2021-05-21 16:07:04 · 226 阅读 · 2 评论 -
Kafka安装
文章目录一、解压缩并安装二、修改配置文件1、设置broker.id2、设置监听器端口3、设置kafka日志目录4、设置Zookeeper端口5、设置可以删除topic6、设置留存时间三、添加环境变量四、启动等相关命令一、解压缩并安装官方下载:点这里二、修改配置文件vi /conf/server.properties1、设置broker.id一台机器一个broker.id,由于我们是伪分布式的,所以只有一个2、设置监听器端口3、设置kafka日志目录4、设置Zookeeper端口伪分原创 2021-05-20 13:58:09 · 379 阅读 · 1 评论 -
消息中间件有哪些
什么是消息中间件灵魂发问:什么是消息中间件?维基百科对消息中间件的解释:面向消息的系统(消息中间件)是在分布式系统中完成消息的发送和接收的基础软件。消息中间件也可以称消息队列,是指用高效可靠的消息传递机制进行与平台无关的数据交流,并基于数据通信来进行分布式系统的集成。通过提供消息传递和消息队列模型,可以在分布式环境下扩展进程的通信。主流的消息中间件当前业界比较流行的开源消息中间件包括:ActiveMQ、RabbitMQ、RocketMQ、Kafka、ZeroMQ等,其中应用最为广泛的要数Rabbit原创 2021-04-29 16:04:33 · 4978 阅读 · 1 评论