HDFS 数据迁移分区表(hive,hadoop)

# --------------- 集群迁移 ---------------------

1：保持两个集群网络互通；

2：数据从HIVE 中下载本地传送到目标 机器上；

3：在机器  服务器IP 上建立对应的文件夹

   3.1 mkdir offlinehdfsdate -- 建立文件夹

   3.2 从HIVE 中导出数据

# ------- 服务器上测试 --------

/data/dataAnalysis/dw/test

# ---------- HIVE 导出本地 ----------

INSERT OVERWRITE LOCAL DIRECTORY '/data/dataAnalysis/dw/test' ROW FORMAT DELIMITED FIELDS TERMINATED by '|' select * from dw.dim_user;

cat 000000_0 000001_0> dim_user.tmp

---------------- scp 远程复制脚本 ----------------------

scp /data/dataAnalysis/dw/test/dim_user.tmp root@服务器IP:/offlinehdfsdate/ -- 数据复制目标机器指定位置

sshpass -p bireport@1478963 scp -p hduser@10.13.128.4:/data/dataAnalysis/dw/test/dim.tmp /offlinehdfsdate/     -- 远程机器复制本地位置

# ---------------- HIVE 导入本地文件 -------------------