rdkafka 使用案例

最新推荐文章于 2024-07-27 11:12:23 发布

hintonic

最新推荐文章于 2024-07-27 11:12:23 发布

阅读量3.2k

点赞数

分类专栏： linux

本文链接：https://blog.csdn.net/hintonic/article/details/81283692

版权

该博客展示了如何使用RDKafka库初始化一个生产者，连接到多个brokers，并发送数据到指定主题。同时，文章提及了启用socket保持活动机制以确保连接可靠性，并在Linux上调整TCP keepalive设置以优化性能。

摘要由CSDN通过智能技术生成

main.cpp

#include <iostream>

#include <ctype.h>
#include <signal.h>
#include <string.h>
#include <unistd.h>
#include <stdlib.h>
#include <syslog.h>
#include <sys/time.h>
#include <errno.h>

#include "rdkafka.h"

const int PRODUCER_INIT_FAILED = -1;
const int PRODUCER_INIT_SUCCESS = 0;
const int PUSH_DATA_FAILED = -1;
const int PUSH_DATA_SUCCESS = 0;

static void logger( const rd_kafka_t *rk, int level,
const char *fac, const char *buf )
{
struct timeval tv;
gettimeofday(&tv, NULL);
fprintf(stderr, "%u.%03u RDKAFKA-%i-%s: %s: %s\n",
(int)tv.tv_sec, (int)(tv.tv_usec / 1000),
level, fac, rk ? rd_kafka_name(rk) : NULL, buf);
}

class ProducerKafka
{
public:
ProducerKafka()
{
};

~ProducerKafka()
{
}

int init_kafka(int partition, char *brokers, char *topic);
int push_data_to_kafka(const char* buf, const int buf_len);
void destroy();

private:
int partition_;

//rd
rd_kafka_t* handler_;
rd_kafka_conf_t *conf_;

//topic
rd_kafka_topic_t *topic_;
rd_kafka_topic_conf_t *topic_conf_;
};

int ProducerKafka::init_kafka( int partition,
char *brokers, char *topic )
{
char tmp[16]