笔记
一纸春秋
张鼎元的博客。
展开
-
flink on yarn 提交任务报错 —— Could not deploy Yarn job cluster
这里到项目路径里面查看一下打包好的jar包打包之后的jar包如果是这两个,然后提交jar包的时候提交的flink-1.0-SNAPSHOT-jar-with-dependencies.jar 这个jar包,那么就会报上面的错误,这里应该是jar包里面的依赖出现了问题我的解决措施是,直接重新创建了一个项目然后是项目的整体pom.xml文件<?xml version="1.0" encoding="UTF-8"?><project xmlns="http://maven.a.原创 2022-01-18 22:41:35 · 3965 阅读 · 0 评论 -
Spark代码打包上传到集群中运行时报错ClassNotFoundException
首先准备代码import org.apache.spark.sql.{DataFrame, SaveMode, SparkSession}object demo4OnHive { def main(args: Array[String]): Unit = { val spark: SparkSession = SparkSession .builder() .appName("demo4OnHive") .config("spark.sql.shuffl原创 2022-01-04 21:43:32 · 1849 阅读 · 0 评论 -
解决时间戳转为日期格式总是为1970年的问题(currentTimeMillis()与数据集里面的数据戳)
原本需要时间戳转日期的时候,都是System.currentTimeMillis();获取当前时间戳,然后转换为日期格式但是最近处理一份数据集的时候,发现用菜鸟教程上面的代码转换而来的日期时间全部都是1970年将时间戳在线转换一下发现是正常的2017年,2016年,说明是代码需要调整一下int timeStamp = 1509418483;SimpleDateFormat sdf=new SimpleDateFormat("yyyy-MM-dd HH:mm:ss");String sd = sd原创 2021-11-24 22:15:09 · 6967 阅读 · 0 评论 -
Java IO —— 实现文件夹及里面全部内容的复制转移
记录一下这个代码的思路package review.IO;import java.io.*;public class test3 { public static void main(String[] args) throws IOException { File f1 = new File("D:\\java\\test1"); File f2 = new File("D:\\java\\test2"); copyDic(f1,f2);原创 2021-10-25 22:23:09 · 305 阅读 · 0 评论 -
Set集合无法去重相同内容的父类对象和子类对象的问题解决
首先展示一下父类和子类的代码父类是Student类,子类是Children类import java.util.Objects;public class Student { private String name; private int age; public Student() { } public Student(String name, int age) { this.name = name; this.age = a原创 2021-10-14 23:41:03 · 383 阅读 · 0 评论 -
java文档注释——生成帮助文档
package NoteDemo;/**这个类里面有一个方法 * @author zhang * @version java1.8 */public class demo1 { /** * 该类的无参构造方法 */ public demo1() { } /** *获取两数之和 * @param a 加数 * @param b 被加数 * @return 经过if语句判断后返回的String值原创 2021-10-13 19:51:09 · 2861 阅读 · 1 评论 -
java的char类型强制转为int类型后,字符值与原先不一样
package test.StringDemo;public class demo8 { public static void main(String[] args) { char a = '1'; int b = 1; int c = 1; System.out.println((int)a == b); //false System.out.println(c == b); //true Sy原创 2021-10-09 21:15:15 · 366 阅读 · 0 评论 -
各种进制转换的方法与示例(手写笔记)
一开始都是需要什么进制转换,然后直接去网上用进制转换器的,但无奈考试的时候没办法上网,所以整合了一下方法,以便以后学习使用。原创 2021-06-28 13:22:03 · 545 阅读 · 0 评论