批量下载线上数据文件--业务诉求

1. 诉求

1. 接到现场运维诉求，需要获取到指定业务节点的所有附件文件

2. 分析

1. 某个节点的业务信息，可以通过sql来筛选出全部需要的关联字段信息以及文件磁盘路径和上传路径

2. 通过脚本或命令，将sql筛选到的路径文件统一复制到指定目录

3. 将复制到的文件下载，发送给现场

3. 实现

1. 写sql，关联到需要的业务字段

2. 将筛选到的路径存放到文本上传到服务器，通过命令读取文件，批量复制到指定文件

3. cat fujian.txt | xargs -i cp {} /home/linuxadmin/fujian

4. 将文件下载下来

4. 总结

1. 善于使用命令和脚本完成日常小业务

2. 中途碰到一个问题，从windows复制下的路径文件有换行

导致复制命令找不到文件，在linux上将文本的格式转换为unix

然后再次执行

可以看到文件存在的已经复制成功，不存在的经过核对是文件服务器切换过路径