datax导入MySQL报错_DataX把数据从一个mysql数据表导入到另一个mysql数据表报错

最新推荐文章于 2023-10-17 17:49:14 发布
最新推荐文章于 2023-10-17 17:49:14 发布
阅读量461 收藏
点赞数
文章标签： datax导入MySQL报错
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_34603528/article/details/113420059
版权

-------- 原始邮件 --------

发件人：Zhang Yexing

时间：2019年11月9日 22:35

收件人：alibaba/DataX

抄送：Subscribed

主题：[alibaba/DataX] DataX把数据从一个mysql数据表导入到另一个mysql数据表报错 (#500)

如题，报错：Description:[数据库用户名或者密码错误，请检查填写的账号密码或者联系DBA确认账号和密码是否正确]. - 该数据库用户名为：root 具体错误信息为：java.sql.SQLException: Access denied for user 'root'@'localhost'.

本人已确认用户名和密码没有错误，但还是会报这个错误，请大神们指点！

—

You are receiving this because you are subscribed to this thread.

Reply to this email directly, view it on GitHub, or unsubscribe.

[ { ***@***.***": "http://schema.org", ***@***.***": "EmailMessage", "potentialAction": { ***@***.***": "ViewAction", "target": "#500?email_source=notifications\u0026email_token=AHNPXWHHFDEOTAPK7GXYL63QS3DC7A5CNFSM4JLHMXW2YY3PNVWWK3TUL52HS4DFUVEXG43VMWVGG33NNVSW45C7NFSM4HYFLEGQ", "url": "#500?email_source=notifications\u0026email_token=AHNPXWHHFDEOTAPK7GXYL63QS3DC7A5CNFSM4JLHMXW2YY3PNVWWK3TUL52HS4DFUVEXG43VMWVGG33NNVSW45C7NFSM4HYFLEGQ", "name": "View Issue" }, "description": "View this Issue on GitHub", "publisher": { ***@***.***": "Organization", "name": "GitHub", "url": "https://github.com" } } ]

贾温悦
关注
datax实现mysql数据同步
congge
02-04 6万+
datax 同步数据使用详解
docker 安装 datax和datax-web 之 datax-web登录时提示账号或密码错误_docker datax
最新发布
m0_61943758的博客
04-03 1441
msg：glueType[DATAX] is not valid.’,NULL,0,NULL,1,NULL,NULL),(129,1,8,‘aoa_attachment_list’,‘10.68.12.104:9999’,‘executorJobHandler’,‘’,NULL,0,‘2023-04-27 10:53:44’,500,‘任务触发类型：手动触发。感兴趣，欢迎戳这里加入程序员的圈子，让我们一起学习成长！
docker 安装 datax和datax-web 之 datax-web登录时提示账号或密码错误
LJT666888的博客
04-27 4277
（3）如果使用的是mysql8 可能会报 Public Key Retrieval is not allowed,解决方法就是在容器内的配置文件路径中修改application。datax-web, datax-exector,配置路径为：/home/datax/datax-web-2.1.2/modules/datax-admin/conf。根据该博客的教程安装成功后，登录页面能打开，但是所提供的账户密码一直报错，这个就需要根据日志一步步去寻找原因了。1、根据启动的id 进入容器内部，查看日志，
使用datax连接达梦数据库时报错：datax 达梦 no suitable driver found for jdbc:dm
z2431435的博客
09-22 3610
1.确实没有合适的达梦数据库驱动，这就需要我们自己去打一个jar包上去，datax的插件库plugin里可以看到原本自带的驱动为Dm7JdbcDriver16.jar，我的路径是datax/plugin/reader/rdbmsreader/libs这里可以看到reader的达梦驱动，我们要做的是下载一个DmjdbcDriver18.jar并且放到datax/plugin/reader/rdbmsreader/libs和datax/lib两个地方，放上去之后可以看到不再报driver的错。
DataX踩坑1 | 连接数据库失败. 请检查您的 账号、密码、数据库名称、IP、Port
慌途L
10-25 1万+
1. ERROR RetryUtil - Exception when calling callable, 异常Msg:Code:[DBUtilErrorCode-10], Description:[连接数据库失败. 请检查您的 账号、密码、数据库名称、IP、Port或者向 DBA 寻求帮助(注意网络环境).]. - 具体错误信息为：java.sql.SQLException: No suitable driver found for [“jdbc:mysql://localhost:3306/data
DATAX如果数据库连接信息错误，设置，重试几次连接
吃素的哈士奇de博客
05-12 2586
DATAX如果数据库连接信息错误，设置，重试几次连接1.校验JDBCRUL的类DBUtil2. 方法内的方法RetryUtil.executeWithRetry 1.校验JDBCRUL的类DBUtil 方法：chooseJdbcUrl 下面展示一些 内联代码片。 // A code block var foo = 'bar'; public static String chooseJdbcUrl(final DataBaseType dataBaseType,
datax数据从hive导入mysql数据缺失解决
01-18
### DataX 数据从 Hive 导入 MySQL 数据缺失解决 #### 背景介绍 在大数据处理领域，Hive 和 MySQL 分别作为数据仓库与关系型数据库的重要组成部分，在数据流转过程中承担着关键角色。Hive 通常用于存储海量数据并...
datax导入mysql数据到hbase_dataX从mysql导出数据到hbase
weixin_28955929的博客
02-06 1057
业务数据库中存了大量的历史数据，导致在根据业务条件查询数据的时候效率太低。因此考虑将原始的业务数据通过SQL先做一遍处理后放到中间表，然后再把中间表的数据同步到hbase，以后直接从hbase查询数据。当然这个还涉及到增量数据如何同步，如何保证增量数据不丢失等问题，不在这里记录。这里只记录mysql中的数据如何全量同步到hbase。异构数据源之间的数据迁移工具比较多，常用的有kettle、sqoo...
datax实战-mysql同步数据到hive
01-07
{ job: { setting: { speed: { channel: 1 }, errorLimit: { record: 0, percentage: 0.02 } }, content: [ { reader: {
DataX数据的迁移（MySQL、HDFS，Hive）
04-12
1.将Mysql中的数据迁移到Hdfs文件系统中，然后通过Hive加载HDFS文件系统中的数据值 2.将Hive中的数据迁移到指定Mysql数据库中 注意点： 1.数据迁移的过程中，由于hive的Null值存储为"\N"，Mysql存储为NULL值，二者...
DataX初次抽取数据记录排错过程（源库、目标库均连接失败）
org.hibernate.tool.schema.spi.SchemaManagementException异常的解决
03-09 4478
数据环境 DataX安装环境：虚拟机，CentOS7 源数据库：云主机，MySQL8.0 目标数据库：本地，MySQL8.0 软件环境 DataX需求环境（参见dataX官网）： Maven 3.x Java 1.8 python 2.7 DataX安装目录：/opt/module/dataX 配置源库和目标库 切换到 DataX家目录 cd /opt/module/dataX ...
03-datax案例02 mysql2hdfs
可乐的博客
11-23 92
生成模板 datax -r mysqlreader -w hdfswriter { "job": { "content": [ { "reader": { "name": "mysqlreader", "parameter": { "column": [],
Datax使用踩坑经历
weixin_43876924的博客
03-22 2637
【代码】Datax使用踩坑经历。
【解决报错】java.sql.SQLException: Access denied for user 'root'@'localhost' (using password: YES)
热门推荐
qiiingc的解题记录
03-05 2万+
IDE：IntelliJ IDEA Ultimate 2019.3 （我用的是学生版，只要大学邮箱能用就可以的） 报错信息全文附在最后。其中关键的信息就是： Root Cause java.sql.SQLException: Access denied for user 'root'@'localhost' (using password: YES) 解决方法 1.首先，如果项目是你...
java.sql.sqlexception access denied for user_java.sql.SQLException: Access denied for user root@loc...
weixin_39597323的博客
02-27 9143
java.sql.SQLException: Access denied for user 'root'@'localhost' (using password: YES)异常是因为访问数据库密码不正确而抛出的。解决思路提示：第一步：查看你的数据库配置文件是否正确，下面就是我的mysql数据库属性配置文件：driver=com.mysql.jdbc.Driverurl=jdbc:mysql://l...
DataX-源码DBUtil
livening的专栏
07-20 1243
DataX源码中的DBUtil，学习其中重连的实现原理
mysql常见错误问题解决 以及常见错误码说明
寂夜了无痕的博客
01-06 2595
mysql常见错误解决办法 以及 常见错误码
疑难杂症，盘点dataxweb数据迁移中遇到的坑(二)
qq_34193086的博客
10-17 427
中的 NUL (NULL)，但解释为空字符，在这里有些说不通，怀疑是换行符，最终也不符合条件，后来经过多方查证，在oracle里面chr(0)表示的是字符串的结束符，这就是chr(0)的陷阱。具体不知道怎么修改的，看我上一篇文章，点击保存，删除掉pg库里表A已经同步的数据，在dataxweb里点击表A的任务，执行一次，即可成功。第一反应，以为是空格的存在，使用trim（）函数去出掉空格，查询出来的所谓数据，还是不行，依然报这样的错误。去替换掉，oracle，表字段里的chr(0)字符，如下。
mysql 错误代码1_mysql常见错误代码解析
weixin_30227789的博客
02-07 971
145 ：文件无法打开。1005：MYSQL创建表失败1006：MYSQL创建数据库失败1007：MYSQL数据库已存在，创建数据库失败1008：MYSQL数据库不存在，删除数据库失败1009：MYSQL不能删除数据库文件导致删除数据库失败1010：MYSQL不能删除数据目录导致删除数据库失败1011：MYSQL删除数据库文件失败1012：MYSQL不能读取系统表中的记录1060：字段重复，导致无...
帮我写一个使用datax将MySQL数据导入hdfs的例子
06-09
好的，下面是一个使用DataX将MySQL数据导入HDFS的示例。 1. 安装配置DataX 首先需要安装并配置DataX，请参考DataX的官方文档。 2. 创建MySQL表 在MySQL中创建一个表，用于存储需要导入HDFS的数据。例如，创建一个名为“employee”的表，包含id、name和age三个字段： ``` CREATE TABLE employee ( id INT(11) NOT NULL AUTO_INCREMENT, name VARCHAR(50) DEFAULT NULL, age INT(11) DEFAULT NULL, PRIMARY KEY (id) ); ``` 3. 填充MySQL表数据 向MySQL表中插入一些数据，用于测试数据导入HDFS的功能。例如，向“employee”表中插入三条记录： ``` INSERT INTO employee (name, age) VALUES ('John', 25); INSERT INTO employee (name, age) VALUES ('Mary', 30); INSERT INTO employee (name, age) VALUES ('Tom', 35); ``` 4. 配置DataX任务 在DataX中配置一个任务，将MySQL表中的数据导入到HDFS中。以下是配置文件的内容： ``` { "job": { "content": [ { "reader": { "name": "mysqlreader", "parameter": { "username": "root", "password": "password", "column": [ "id", "name", "age" ], "connection": [ { "jdbcUrl": [ "jdbc:mysql://localhost:3306/test" ], "table": [ "employee" ] } ] } }, "writer": { "name": "hdfswriter", "parameter": { "defaultFS": "hdfs://localhost:9000", "fileType": "text", "path": "/user/hadoop/datax/mysql/", "fileName": "employee.txt" } } } ] } } ``` 以上配置文件中，包含一个任务，任务中包含一个MySQL的reader和一个HDFS的writer。其中，MySQL的reader用于读取MySQL表中的数据，HDFS的writer用于将数据写入到HDFS中的文本文件中。具体的参数含义可以参考DataX官方文档。 5. 运行DataX任务 在DataX的安装目录下，使用如下命令运行DataX任务： ``` python bin/datax.py job/job.json ``` 运行完成后，可以在HDFS的/user/hadoop/datax/mysql/目录下找到生成的employee.txt文件，文件中包含MySQL表中的所有数据。 以上就是一个使用DataX将MySQL数据导入HDFS的示例，具体的操作还需要根据实际情况进行调整。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值