skylikey的博客

原创 spark任务导入自定义配置文件

在开发代码的时候，想要让自己的代码更加灵活，可以采用导入自定义配置文件的方法，这样我们每次只需要修改配置文件的内容达到更改代码部分逻辑的目的，使代码更加灵活。将jar包传上集群运行的时候，加上args(0),args(1)例如（opt/conf/config.txt 20230222）示例配置文件如下图，根据日期区间选择过滤的条件。