2017年09月_徴心

09月 08月 07月 06月 04月 03月 02月 01月

原创 Spark 启动 java.lang.ClassNotFoundException: parquet.hadoop.ParquetOutputCommitter

Spark启动报 java.lang.ClassNotFoundException: parquet.hadoop.ParquetOutputCommitter 我安装的是hadoop-2.6.0-cdh5.12.1和spark-1.6.0-cdh5.12.1 解决的版本是将下面的jar包下载下来放到Spark的启动ClassPath下,然后重启Spark<dependency> <

2017-09-19 17:01:27 4048

原创 Spark 启动java.lang.NoClassDefFoundError: com/fasterxml/jackson/databind/Module 报错

之前一直没有搞过Spark,这阵有时间,今天在搭建的过程中在启动Spark的时候发现了报错,之前以为是不是有什么配置自己没有搞清楚,最后搜索半天还是没有找到,自己试着找了一下包,Ok成功启动,在这里记下,避免其他人在这块费时间下面是异常信息,很明显是缺少类,之前一直以为是自己没有配置清楚,没有想到是缺包,博主的是在装的伪分布版本如下 hadoop-2.6.0-cdh5.12.1.tar.gz

2017-09-18 19:04:59 10838 7

原创 Java求字符串的最大子串和长度(没有判断是否连续)

之前在面试的时候遇到过的一个问题,由于当场让手写(特别反感这种面试中要求手写的),就没理会,回来想想看看能不能实现,今天有时间写出来,让大家帮忙指正。题目是给出一个字符串计算出它的最大子串例: “abcdefgabc” -> abcdefg “ababcdeac” -> abcde 代码在下面,加了注释/** * 求字符串的最大子串 * * @ClassName:

2017-09-01 18:14:01 1238