大数据
FlyTimey
这个作者很懒,什么都没留下…
展开
-
kafka配置文件
1、在kafka/config/目录下面有3个配置文件: producer.properties consumer.properties server.properties 1、producer.properties:生产端的配置文件 #指定kafka节点列表,用于获取metadata,不必全部指定 #需要kafka的服务器地址,来获取每一个topic的分片数等元数据信息。 metadata....转载 2019-09-13 13:02:11 · 1118 阅读 · 0 评论 -
kafka使用磁盘而不是内存
kafka使用磁盘不是内存 Kafka最核心的思想是使用磁盘,而不是使用内存,可能所有人都会认为,内存的速度一定比磁盘快,我也不例外。在看了Kafka的设计思想,查阅了相应资料再加上自己的测试后,发现磁盘的顺序读写速度和内存持平。 而且Linux对于磁盘的读写优化也比较多,包括read-ahead和write-behind,磁盘缓存等。如果在内存做这些操作的时候,一个是Java对象的内存开销很大,...转载 2019-09-13 13:11:34 · 864 阅读 · 0 评论