使用librdkafka作为producer (一)

原创 2014年12月23日 15:03:24

github地址: https://github.com/edenhill/librdkafka


使用librdkafka开发一个producer的步骤:

librdkafka:
1. conf 设置
kafka conf:
    rd_kafka_conf_new(): rd_kafka_conf_set()
topic conf:
    rd_kafka_topic_conf_new(): rd_kafka_topic_conf_set()
    
2. 设置conf回调,消息发送成功或者失败都会调用
    rd_kafka_conf_set_dr_cb()
    rd_kafka_conf_set_dr_msg_cb()

3. 创建kafka
    rd_kafka_new()
设置系统日志
    rd_kafka_set_logger()
    rd_kafka_set_log_level()
添加下游brokers:
    rd_kafka_brokers_add()
    
4. 创建新的topic
    rd_kafka_topic_new()
    
5. producer:
    rd_kafka_produce()
    发送后,设置时间观察,第二个参数是阻塞等待时间,一般设置为0,rd_kafka_poll()
    
6. 销毁操作
    rd_kafka_topic_destroy()
    rd_kafka_destroy()
    rd_kafka_wait_destroyed(2000)

版权声明:本文为博主原创文章,未经博主允许不得转载。

kafka生产者producer的Java实现。

继前面几篇  1. 搭建Storm集群 http://blog.csdn.net/ch717828/article/details/50718783  2. kafka集群环境搭建 http://...
  • ch717828
  • ch717828
  • 2016年03月07日 12:14
  • 12465

Kafka源码学习笔记--KafkaProducer

先来看看一段简单的KafkaProducer应用的代码: import org.apache.kafka.clients.producer.*; import org.junit.Test; im...
  • Del_Zhu
  • Del_Zhu
  • 2016年12月03日 16:54
  • 3191

php rdkafka扩展发送和接收消息

发送消息 try {     $rcf = new RdKafka\Conf();     $rcf->set('group.id', 'test');     $cf = new RdKafka\...
  • u013713010
  • u013713010
  • 2017年04月24日 10:29
  • 2892

c语言使用librdkafka库实现kafka的生产和消费实例

关于librdkafka库的介绍,可以参考kafka的c/c++高性能客户端librdkafka简介,本文使用librdkafka库来进行kafka的简单的生产、消费 一、producer lib...
  • lijinqi1987
  • lijinqi1987
  • 2017年08月02日 17:24
  • 3428

librdkafka的使用和介绍

librdkafka的使用介绍 librdkafka是kafka的c语言接口   下面简单的介绍一下其接口     1、rd_kafka_conf_set设置全局配置     2、rd_kafka_t...
  • chenxun2009
  • chenxun2009
  • 2017年03月08日 23:15
  • 8957

librdkafka的安装和使用

安装:下载https://github.com/edenhill/librdkafka 预备环境:The GNU toolchain GNU make pthreads zlib (optiona...
  • ljp1919
  • ljp1919
  • 2017年06月24日 19:09
  • 4203

kafka_demo.zip

  • 2017年10月10日 16:17
  • 13.64MB
  • 下载

kafka的c/c++高性能客户端librdkafka简介

Librdkafka是c语言实现的apachekafka的高性能客户端,为生产和使用kafka提供高效可靠的客户端,并且提供了c++接口   性能: Librdkafka 是一款专为现代硬件使用而设计...
  • lijinqi1987
  • lijinqi1987
  • 2017年08月02日 10:35
  • 2333

librdkafka问题小记

librdkafka问题小纪本文介绍在使用kafka的C++客户端librdkafka时遇到的一些问题及解决方法。1.生产者消息尺寸太大;2.生产者没有定期回调poll()方法...
  • cjf_wei
  • cjf_wei
  • 2017年04月02日 11:04
  • 1537

使用librdkafka 封装的C++类

kafka就不介绍了, 可以参考kafka的c/c++高性能客户端librdkafka简介,下面说下librdkafka的编译: 下载地址:https://github.com/edenhill/l...
  • xpg4321
  • xpg4321
  • 2017年08月29日 12:49
  • 1144
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:使用librdkafka作为producer (一)
举报原因:
原因补充:

(最多只允许输入30个字)