大数据
quguilai2006
这个作者很懒,什么都没留下…
展开
-
kafka点滴
~Kafka的目的就是要成为一个队列平台,仅仅使用它就能够既支持离线又支持在线使用这两种情况 ~consumer group是接收消息的最小单位,也就是consumer group消费的消息只由其中的一个consumer接收。 ~每个kafka队列都有分区数,每个分区在物理上对应一个文件夹, 以”topicName_partitionIndex”的命名方式命名,该文件夹下存储这个分区的所有...原创 2016-08-14 12:31:09 · 106 阅读 · 0 评论 -
hadoop eclipse debug
export HADOOP_JOBTRACKER_OPTS="-Xdebug -Xrunjdwp:transport=dt_socket,address=8788,server=y,suspend=y" bin/start-all.sh 如果脚本运行成功,则可以看到Shell 命令行终端显示如下信息: Listening for transport dt_socket at addr...原创 2014-12-16 09:38:44 · 101 阅读 · 0 评论