SQOOP
文章平均质量分 58
80后大叔爱学习
2023年10月开始更新博客内容均为逆向相关的,其它内容暂时不会更新,没有太晚的开始,不如就从今天行动。
展开
-
CDH大数据平台 25Cloudera Manager Console之sqoop实战测试(markdown新版)
CDH大数据平台 25Cloudera Manager Console之sqoop实战测试(markdown新版)原创 2022-11-06 05:00:00 · 315 阅读 · 23 评论 -
HDP 11.sqoop 将 MySQL 数据导⼊ Hive
十二、 sqoop将 MySQL 数据导⼊ Hive1、将 ambari.users 表导入到 dim_v8sp数据库在 client-v01 服务器创建 etl 用户 HOME目录,生成kerberos票据文件,并添加 crontab以定期刷新飘据到缓存。cd /home/;cp -r ./bigdata ./etl;chown -R etl:etl ./etl;rm -rf /home/etl/security/keytabs/bigdata.keytab;su - ...原创 2021-11-04 17:57:11 · 1474 阅读 · 0 评论 -
HADOOP org.apache.hadoop.yarn.exceptions.InvalidAuxServiceException: The auxService
添加以下文件:<property><name>yarn.nodemanager.aux-services</name><value>mapreduce_shuffle</value></property><property><name>yarn.nodemanager.aux-services.mapreduce....原创 2021-03-19 16:31:43 · 540 阅读 · 0 评论 -
SQOOP com.mysql.cj.jdbc.exceptions.CommunicationsException: Communications link failure
错误:java.lang.RuntimeException: com.mysql.cj.jdbc.exceptions.CommunicationsException: Communications link failure原因:因为我的服务器在内网,mysql在云端,所以导入数据的时候只有master节点可以联网解决方法:master、slave节点都需要联网才能正常......原创 2021-01-26 11:21:04 · 1207 阅读 · 0 评论 -
MYSQL Loading class `com.mysql.jdbc.Driver‘. This is deprecated. The new driver class is `com.mysql.
错误:Loading class `com.mysql.jdbc.Driver'. This is deprecated. The new driver class is `com.mysql.cj.jdbc.Driver'. The driver is automatically registered via the SPI and manual loading of the driver class is generally unnecessary.原创 2021-01-26 11:16:15 · 210 阅读 · 0 评论