- 博客(7)
- 收藏
- 关注
原创 org.elasticsearch.hadoop.EsHadoopIllegalArgumentException: expected end of object, found END_ARRAY
Caused by: org.elasticsearch.hadoop.EsHadoopIllegalArgumentException: expected end of object, found END_ARRAY at org.elasticsearch.hadoop.util.Assert.isTrue(Assert.java:60) at org.elasticsearc...
2019-08-30 11:05:59 3073
原创 使用hadoop MR处理数据导入Elasticsearch
我的hadoop版本hadoop-2.6.5。我的Es版本elasticsearch-6.4.3。首先保证你的hadoop集群可以跑wordcount例子。以下为pom文件,注意这里要加上<scope>provided</scope>,否则会出现以下错误org.apache.hadoop.mapred.YarnChild: Error running child :...
2019-02-26 18:18:19 2221
原创 使用grafana展示kairosdb数据
最近使用grafana展示opentsd中的heapster监控数据,但是grafana配置opentsdb模板时,query查询tag_values时出现问题,后因为一系列问题,老大决定使用kairosdb,kairosdb果然比opentsd好使啊,附件为kairosdb的grafana dashoboard json文件,可以直接导入使用,细节需要自己更改
2017-12-14 15:55:49 1509 2
原创 KafkaStream 消费telegraf出现 has invalid (negative) timestamp 异常详解
[2017-08-09 10:03:16,632] WARN stream-thread [MyKstream-ffaae771-ce86-47c2-9b4b-177504e016d5-StreamThread-1] Unexpected state transition from RUNNING to DEAD. (org.apache.kafka.streams.processor.inter
2017-08-09 14:03:12 3370 5
原创 Spark SQL下Parquet内幕深度解密
一.SparkSQL下的Parquet意义再思考Twitter用Parquet节省了70%存储费用。如果HDFS是大数据时代分布式文件系统存储的事实标准的话,Parquet则是整个大数据时代文件存储格式的事实标准速度更快:从使用SparkSQL操作普通文件CSV和Parquet文件的速度对比上来看,绝大多数情况下,使用Parquet会比使用CSV等普通文件速度提升10倍
2017-07-01 10:18:56 541
原创 INFO - Call exception, tries=10, retries=35, started=48972 ms ago, cancelled=false, msg=row 'event_l
近日遇到以上问题,使用idea链接hbase时候出现以上异常,在网上找了很多资料,历时一天半都没搞出来,真是fuck dog最后把liux的/etc/hosts 里的前两行 127.0.0.1 admin........................和:::1 @#¥%………………这两行删掉再把windows的ip映射文件,C:\Windows\System32\drivers\
2017-05-02 19:18:44 8431 10
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人