kafka
飞翔的小宇宙
天下事有难易乎?为之,则难者亦易矣;不为,则易者亦难矣。 人之为学有难易乎?学之,则难者亦易矣;不学,则易者亦难矣。
展开
-
Apache Kafka介绍和理论依据
引言:Apache Kafka是一个广受欢迎的分布式流媒体平台,New Relic、Uber以及Square等数千家公司都在使用它构建可扩展、高吞吐量、可靠的实时流媒体系统。例如,New Relic的Kafka集群每秒处理超过1500万条消息,总数据速率接近1 Tbps。Kafka在应用程序开发人员和数据科学家中非常受欢迎,因为它极大简化了数据流的处理过程。但是,Kafka在Scala上实践会...原创 2018-10-10 09:37:39 · 149 阅读 · 0 评论 -
五.Spark Streaming之kafka单节点多broker部署及使用(二)
一.引言    对于Kafka,一个代理只是一个大小为1的集群,所以除了启动更多的代理实例之外,不会有什么变化。但是为了了解它,让我们将集群扩展到三个节点(仍然都在本地机器上)。二.单节点多Broker部署及使用具体的环境搭建配置请点击环境搭建参考第一步.复制server.properties为:se原创 2018-11-19 11:38:03 · 440 阅读 · 0 评论 -
Springboot集成kafka
一.kafka在mac环境下的安装1.安装kafka$brew install kafka上面安装过程中已经自动安装了zookeeper2.软件位置/usr/local/Cellar/zookeeper/usr/local/Cellar/kafka3.配置文件位置/usr/local/etc/kafka/zookeeper.properties/usr/local/etc/k...原创 2019-04-02 16:39:37 · 600 阅读 · 0 评论