- 博客(5)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 kafka偏移量offset--java
maven org.apache.kafka kafka_2.10 0.9.0-kafka-2.0.2private SparkKafka kafka = null ;private static final String TOPIC_SOURCE = "TP_LABEL";public SparkStoredKuduApp(String[] ar
2017-11-29 15:20:44
5510
1
原创 kudu入库--java
建表语句：create table user_portrait_kudu(id STRING, open_id STRING, user_id STRING,label_code STRING, label_level SMALLINT, label_name STRING, label_str_value STRING, label_num_value DOUBLE, PRIMARY KEY
2017-11-29 14:09:12
1995
原创 kafka常用命令（cdh5.10.0+kafka）
cd /opt/cloudera/parcels/CDH-5.10.0-1.cdh5.10.0.p0.41/binkafka-topics --delete --zookeeper personas1:2181 --topic TP_LABELkafka-topics --list --zookeeper personas1:2181参考资料：http://kafka.ap
2017-11-29 12:39:29
2641
原创 kafka集群监控KafkaOffsetMonitor
黑窗口的kafka集群没有监控，可以使用三方开源的监控工具，KafkaOffsetMonitor这个工具耦合性比较低，单用于监控比较适合而且部署很简单。 下载地址：http://pan.baidu.com/s/1qXJa7QO服务器上创建文件夹 kafkamonitor，把jar报上传到服务器创建start.sh#!/bin/bashjava -Xms512M -Xmx
2017-11-29 11:13:45
449
原创 maven-shade-plugin打包无法加载spring问题
spark工程集成spirng，在main方法中加载springpublic static void main(String[] args) { SpringContainer.getSpringContext(); SummarySpark summary = new SummarySpark(args); summary.start();}public c
2017-11-29 10:46:55
1942
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人