![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
文章平均质量分 64
银河小分队
这个作者很懒,什么都没留下…
展开
-
scala编写spark打包之后没有scala源码
使用idea编写spark时,打包之后一直没有scala目录下的源码。构建环境 <plugin> <groupId>net.alchim31.maven</groupId> <artifactId>scala-maven-plugin</artifactId> <version>3.2.2</version>原创 2022-05-10 08:30:37 · 440 阅读 · 0 评论 -
Azkaban3.8安装问题总结
一、Specified key was too long; max key length is 767 bytes写入SQL语句出现,建立索引出现异常。解决:默认的字符集为latin1。创建时指定:create database if not exists test03 default character set = ‘utf8’;已经创建了进行修改:alter database 数据库名 character set utf8;ps:修改完数据库字符集,需要重启mysql数据库。注意,这个修原创 2021-12-22 11:29:51 · 945 阅读 · 0 评论 -
Flume滚动文件输出时文件名格式化为yyyyMMddHHmmss
前言Flume的sink 本地文件存储使用File Roll Sink时,默认文件格式是启动当前的时间戳+数字,不方便观察。于是查看源码,发现一个新大陆。Flime的RollingFileSink有PathManager(路径管理器)中找到了答案。一、如何配置?直接上结果:在配置文件中加入这个参数# 这是路径按照时间格式yyyyMMddHHmmss 滚动文件sink.pathManager = ROLLTIME # 完整版a1.sinks.k1.type = file_rolla1.sink原创 2021-11-02 17:11:36 · 749 阅读 · 0 评论