mv argument list too long错误

家中领导负责的一个系统,在清理过期文件的时候,提示了个错误,是时候展示真正的技术了,


需求

Linux中,有如下路径结构,

/opt/app/log
/opt/app/log/backup

需要将/opt/app/log中"a"开头和".log"为后缀的文件,挪动到/opt/app/log/backup文件夹中,符合条件的文件数量有几十万,此时执行mv,则会提示mv参数列表太长的错误,

mv /opt/app/log/a*.log /opt/app/log/backup/
错误:mv argument list too long

问题

这是因为mv移动的文件数量太多了,此时不能通过mv移动文件。

解决方案1

Argument list too long本质是需要处理的长度超过系统的长度,因此无法执行相关命令。

既然参数过长,直观的思路,就是减少参数,分而治之的方式,来解决这问题。

此时就可以借助find找出符合条件的文件,然后拆开执行,mv的指令,有两种执行方式,一个是xargs,另一个是-exec。

xargs指令是给其他指令传递参数的一个过滤器,也是组合多个命令的一个工具,-i会将xargs的内容赋值给{}。

-exec参数后面是指执行其后面的指令,-exec以;为结尾,由于各个系统中分号的意义不同,因此用\进行转义,即\;,{}会被find指令的结果替换。

我们采用-exec,拼接指令如下,find首先找出符合条件的文件,然后{}会替换find的结果,依次执行mv,

$ cd /opt/app/log
$ find . -type f -name 'a*.log' "/opt/app/log/*" -exec mv {} /opt/app/log/backup/ \;
mv: `./backup/a1.log' and `/opt/app/log/backup/a1.log' are the same file
mv: `./backup/a2.log' and `/opt/app/log/backup/a2.log' are the same file
...

从结果来看,a*.log的文件,确实从/opt/app/log移到/opt/app/log/backup,但是执行了多少次的mv,就会提示多少次"... and ... are the same file",相当于刷屏几十万次,这是为什么?

而且从提示看,"./backup/a1.log"和"/opt/applog/backup/a1.log",因为此时使用"cd /opt/app/log",已经是在/opt/app/log下执行了,所以"./backup/a1.log"和"/opt/applog/backup/a1.log"其实就是同一个文件。

解决方案2

从Stackoverflow的一个帖子,看到这种解释,find指令会递归到/opt/app/log/backup/路径下搜索文件,

find works recursively. It searches for files inside /opt/app/log/backup too

按照他说的,相当于我在/opt/app/log/和/opt/app/log/backup/下都要搜索一次a*.log,此时执行mv,会提示文件重复,禁止执行。

既然知道了解释,如何解决?

我们检索的目标,其实就是/opt/app/log/,因此不让find找/opt/app/log/backup/路径,就可以了。此时,可以使用"-not -path",指定不扫描。

使用如下指令,"-not -path"跟着/opt/app/log/backup/,表示不扫描/opt/app/log/backup/路径,

$ find /opt/app/log/ -type f -name 'a*.log' -not -path "/opt/app/log/backup/*" -exec mv {} /opt/app/log/backup/ \;

此时就能正常执行指令mv,不会出现提示的错误了。

  • 1
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
在信号处理领域,DOA(Direction of Arrival)估计是一项关键技术,主要用于确定多个信号源到达接收阵列的方向。本文将详细探讨三种ESPRIT(Estimation of Signal Parameters via Rotational Invariance Techniques)算法在DOA估计中的实现,以及它们在MATLAB环境中的具体应用。 ESPRIT算法是由Paul Kailath等人于1986年提出的,其核心思想是利用阵列数据的旋转不变性来估计信号源的角度。这种算法相比传统的 MUSIC(Multiple Signal Classification)算法具有较低的计算复杂度,且无需进行特征值分解,因此在实际应用中颇具优势。 1. 普通ESPRIT算法 普通ESPRIT算法分为两个主要步骤:构造等效旋转不变系统和估计角度。通过空间平移(如延时)构建两个子阵列,使得它们之间的关系具有旋转不变性。然后,通过对子阵列数据进行最小二乘拟合,可以得到信号源的角频率估计,进一步转换为DOA估计。 2. 常规ESPRIT算法实现 在描述中提到的`common_esprit_method1.m`和`common_esprit_method2.m`是两种不同的普通ESPRIT算法实现。它们可能在实现细节上略有差异,比如选择子阵列的方式、参数估计的策略等。MATLAB代码通常会包含预处理步骤(如数据归一化)、子阵列构造、旋转不变性矩阵的建立、最小二乘估计等部分。通过运行这两个文件,可以比较它们在估计精度和计算效率上的异同。 3. TLS_ESPRIT算法 TLS(Total Least Squares)ESPRIT是对普通ESPRIT的优化,它考虑了数据噪声的影响,提高了估计的稳健性。在TLS_ESPRIT算法中,不假设数据噪声是高斯白噪声,而是采用总最小二乘准则来拟合数据。这使得算法在噪声环境下表现更优。`TLS_esprit.m`文件应该包含了TLS_ESPRIT算法的完整实现,包括TLS估计的步骤和旋转不变性矩阵的改进处理。 在实际应用中,选择合适的ESPRIT变体取决于系统条件,例如噪声水平、信号质量以及计算资源。通过MATLAB实现,研究者和工程师可以方便地比较不同算法的效果,并根据需要进行调整和优化。同时,这些代码也为教学和学习DOA估计提供了一个直观的平台,有助于深入理解ESPRIT算法的工作原理。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值