正确解决java.lang.FileNotFoundException异常的有效解决方法

飞码创造者

已于 2024-05-14 00:09:40 修改

阅读量2.4k

点赞数 4

分类专栏：解决bug 文章标签： java 开发语言 bug

于 2024-05-14 00:08:41 首次发布

本文链接：https://blog.csdn.net/wbajsjhhhhh/article/details/138824972

版权

解决bug 专栏收录该内容

245 篇文章 ¥9.90 ¥99.00

订阅专栏

超级会员免费看

正确解决java.lang.FileNotFoundException异常的有效解决方法

文章目录

报错问题

java.lang.FileNotFoundException异常

报错原因

java.lang.FileNotFoundException 是Java编程语言中一个常见的异常类型&#

了解本专栏

订阅专栏解锁全文

超级会员免费看

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

飞码创造者

关注关注

4
点赞
踩
204

收藏

觉得还不错? 一键收藏
1
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

订阅专栏

Dolphinscheduler配置Datax抽取数据

weixin_43025027的博客

01-18

6580

需求是从mysql增量抽取数据到postgresql 练习了两种实现方式第一种：使用海豚自带datax组件实现第二种：在海豚里调用shell脚本实现，抽取配置写在shell脚本中 shell脚本配置内容如下：下载地址：https://download.csdn.net/download/weixin_43025027/76460239 { “job”: { “content”: [ { “reader”: { “name”: “mysqlreader”, “parameter”: { “colum

DolphinScheduler使用DataX简单抽取数据(MySQL)

weixin_42890062的博客

07-12

2109

dolphinscheduler使用DataX增量抽取数据

1 条评论您还未登录，请先登录后发表或查看评论

Dolphinscheduler 集成DATAX

zgj123456a的博客

08-07

1399

datax默认环境变量存配置位置/opt/module/dolphinscheduler/conf/env/dolphinscheduler_env.sh。usr/java/jdk1.8.0_181-cloudera 为环境安装的位置通过 which java 或者 echo $JAVA_HOME 查看。1. 环境配置: 按照自己服务器中相关环境安装的位置配置相应的环境变量.如果不配置,会使用datax默认的环境变量.2. 修改环境变量以后执行调度任务。执行下面命令,添加软连接.

大数据学习（58）-DolphinScheduler使用DataX实现数据同步

weixin_61006262的博客

03-07

1186

点击。

dolphinscheduler搭配datax跨库数据库全量更新

stringjava_001的博客

05-22

1710

python位系统自带地址，目录为、/usr/lib/pyhton2.7，但是在配置时，不PYTHONE_HOME只到/usr，下面$PYTHON_HOME/bin 修改为 $PYTHON_HOME/lib，在执行datax服务时默认会默认带上/python2.7，所以这里要去掉；配置地址在/dolphinscheduler-bin/bin/env/dolphinscheduler_env.sh。执行tar -zxvf datax.tar.gz。4）执行任务：上线任务，执行任务。3、设置项目及工作流。

dolphinscheduler之datax记录

txw1234的博客

04-10

1459

Hive在建表的时候，可以指定分区partition，例如创建分区partition(day=“20150820”,hour=“09”)，对应的hdfs文件系统中，相应的表的目录下则会多出/20150820和/09两个目录，且/20150820是/09的父目录。另外需要注意的是，HdfsReader在读取textfile数据时，需要指定字段分割符，如果不指定默认为’,'，HdfsReader在读取orcfile时，用户无需指定字段分割符。

DolphinScheduler使用Datax同步Hive结果到MYSQL

熊浪的博客

06-14

4918

1、安装DolphinScheduler 2、创建租户信息注意：租户名称就是Linux的执行命令的用户名称，所以不能出错 3、根据实际情况确定是否需要创建工作组，存在一个default默认工作组，是当前的所有机器，可以通过组信息来确定定特定的机器执行某个任务，比如DataX插件执行同步任务，可以只在某个机器上安装DataX，之后通过组信息来确定某个安装了同步插件的机器执行同步任务，这样可以降低每台机子上安装的插件个数，但可能会存在，某个机子宕机，任务不能执行的风险 4、环境管理默认使用 ./dolp

适配datax（包含DorisWriter 插件）的datax_web

10-10

DataX doriswriter 插件，用于通过 DataX 同步其他数据源的数据到 Doris 中。(https://doris.apache.org/zh-CN/docs/ecosystem/datax?_highlight=datax#%E5%85%B3%E4%BA%8E-datax) DataX Web是在DataX之上开发的...

Datax的dorisreader组件

01-21

除了Doris之外，Datax还支持如MySQL、PostgreSQL、Oracle等传统关系型数据库，也支持HBase、HDFS、MongoDB等大数据存储解决方案。这使得Datax能够覆盖更多的数据同步场景，成为数据工程师日常工作中不可或缺的工具之...

使用datax将postgresql或者greenplum中的数据同步到elasticsearch

HiterCoder

02-06

2383

1、使用datax工具将postgresql或者greenplum数据库中的数据同步到elasticsearch中。DataX目前已经有了比较全面的插件体系，主流的RDBMS数据库、NOSQL、大数据计算系统都已经接入，目前支持数据如下图：类型数据源Reader(读)Writer(写)文档 RDBMS 关系型数据库 MySQL √ √ 读、写 O...

datax_mongodbreader插件

10-19

解决mongodbreader中空值处理的异常。com.alibaba.datax.common.exception.DataXException: Code:[DBUtilErrorCode-00], Description:[您的配置错误.]. - 列配置信息有错误. 因为您配置的任务中，源头读取字段数:6 与目的表要写入的字段数:7 不相等. 请检查您的配置并作出修改.

datax mongodbreader 加强版

08-24

解决了mongo文档字段不一致（对某些字段，有的文档有，有的没有），导致同步到hive 出现错列问题

【Datax-Web】配置datax-web接口免鉴权及扩展支持其他数据库

N0nsense的博客

07-10

703

配置位置com.wugui.datax.admin.config.SecurityConfig SecurityConfig类中有个重写的方法configure() 在此处，根据需要配置你需要免鉴权的接口，目前网上提供的通过配置文件来配置的，我试过没用的！！需要基于datax-web-ui和datax-web这两个项目二次开发，目前本人已经开发完成，流程已打通，但是还有一些可优化的地方，因为是定制开发，所以不够通用，后期优化后上传github再贴链接，如果需要这部分代码，可以留言，我看到了会给您回复，谢谢

Dolphinscheduler配置dataX离线采集任务写入hive实践（二）

keep_learn的专栏

11-08

1447

hive 文件保存有格式区别，如果在dataX 任务里，没有细心核对hive 文件格式，虽然表面上dataX 任务执行成功，但是hive的文件却被破坏了，导致不可用。发现可以在系统中配置环境变量指定用户，这样就可以在dolphins中通过dataX 直接向hive 中写入数据了。但系统和内hive表一般时动态增加的，总不能一直靠着命令行解决问题吧，后边研究了Hadoop的权限校验。dataX 导入hive 分区表必须指定分区，否则的话，任务执行成功，没有返回异常，但是呢，数据没写入。

Dolphinscheduler调度DataX配置

docsz的博客

07-09

8434

1、hive建表 create table nf_meat_ods.emp_wide ( empno int, ename string, job string, mgr int, hiredate date, sal int, comm int, deptno int, dname string, loc string ) ROW format delimited fields terminated BY “,” STORED AS TEXTFILE; 2、编写datax配置文件 ...

【项目逻辑】dolphinscheduler怎么调用datax获取其返回值成功：0 失败：1

吃素的哈士奇de博客

12-27

1032

创造进程，执行command文件 3402_126347_1516.command文件的内容： 3402_126347_1516_node.sh的内容：

【Dolphinscheduler3.2.0+DATAX】同步数据(mysql,pgsql,oracle,sqlserver)到clickhouse

qq_41767351的博客

11-08

4749

【代码】【Dolphinscheduler3.2.0+DATAX】同步数据mysql到clickhouse。

Dolphinscheduler二次开发支持DataX的自定义参数传递实现数据UPSET

weixin_42890062的博客

07-23

2246

dolphinscheduler二次开发适配DataX的自定义参数传递

dolphinscheduler安装datax

最新发布

03-08

### 如何在 DolphinScheduler 中安装并配置 DataX #### 准备环境为了使 DolphinScheduler 能够成功调用 DataX 进行数据传输任务，需先准备好相应的运行环境。这通常意味着要有一个已经部署好的 DolphinScheduler 环境以及 Java 开发工具包(JDK)，因为两者都是基于 JVM 的应用程序。 #### 下载与解压 DataX 前往阿里巴巴官方 GitHub 页面下载最新版本的 DataX 压缩包[^1]。获取压缩文件之后将其放置于服务器上的合适位置，并通过命令行工具对其进行解压缩处理： ```bash tar -zxvf datax.tar.gz -C /path/to/directory/ ``` #### 配置 DataX 插件路径编辑 DolphinScheduler 的 `worker` 组件下的 `datasource.properties` 文件来指定 DataX 所处的具体目录地址。确保此属性被正确设置以便让 DolphinScheduler 可以找到 DataX 并加载必要的插件支持。对于 MySQL 到 MySQL 数据同步场景中的元数据表创建及初始数据迁移可以通过如下 shell 脚本来实现自动化操作: ```bash sh script/create-dolphinscheduler.sh ``` 该脚本会负责构建所需的数据库结构并且填充一些基本的信息作为启动条件的一部分。 #### 创建和管理作业流程利用 DolphinScheduler 提供的任务编排功能设计具体的 ETL 流程图。针对不同的业务需求可以灵活组合多种类型的节点比如 Shell、Python 或者 SQL 来满足复杂多变的应用场合。当涉及到 Hive 表的操作时需要注意特别之处，例如日期分区字段应当按照实际应用场景合理设定默认值或是动态参数化表达式${pt}用于每日新增加的数据切片][^[^23]。 #### 上线发布工作流一旦完成了整个 DAG(Directed Acyclic Graph)的设计就可以考虑把它提交给生产环境中去执行了。进入项目视图界面选择目标 workflow 后点击右上角带有向右箭头图标按钮即可触发一次完整的端到端测试验证过程[^4]。