总结
文章平均质量分 76
austboy123
这个作者很懒,什么都没留下…
展开
-
log4j DailyRollingFileAppender支持保留最近n天,并且可以对一天的文件根据大小切分
log4j DailyRollingFileAppender不支持只保留最近n天的数据,时间一久导致日志文件很多,并且一天的文件有可能比较大,所以自己写了个appender,以解决这两个问题。 具体代码实现如下:package com.mytools.common.log4jext;import java.io.File;import java.io.FileFilter;impor...原创 2018-03-22 13:15:29 · 5811 阅读 · 0 评论 -
hive相关报错问题解决办法
1.Unable to determine Hadoop version information. 'hadoop version' returned:解决办法:修改bin/hive,# HADOOP_VERSION=$($HADOOP version | awk '{if (NR == 1) {print $2;}}');HADOOP_VERSION=$($HADOOP v...原创 2018-11-13 09:15:16 · 8993 阅读 · 1 评论 -
spark应用程序开发总结
1.静态变量取不到值,报空指针异常出现这种情况主要原因:rdd的操作中去读取配置文件中的值,如:public static float col1= Float.valueOf(RESOURCE_BUNDLE.getString("col1"));解决办法:把操作rdd的方法抽取到一个单独的类中,让该类实现序列化接口,把变量通过构造函数或者函数参数传到该类中。2.spark sql,...原创 2018-11-13 09:39:08 · 522 阅读 · 0 评论