/bin/cat: Argument list too long

最新推荐文章于 2024-04-30 09:13:48 发布
最新推荐文章于 2024-04-30 09:13:48 发布
阅读量2.1w 收藏
点赞数
分类专栏： linux 文章标签： list google
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/robertaqi/article/details/7381167
版权

因做一个统计，下载了一个星期的统计日志，

有2000多个文件，每一个文件里面的格式都是一样的，

得先把这些日志文件进行合并，

然后再放到hadhoop上面去运算，问题就这样产生了，

这些日志文件都放在logdeal目录下，我想用 cat/logdeal/* > merge.lst文件里面。

结果就产生了/bin/cat: Argument list too long 这个错误，google了一下，发现是cat文件数目是有多少限制了。


解决办法

用命令  find ./logdeal/ -name *.log | xargs cat  > merge.lst


成功的解决了此问题， 以后要处理多个文件，还是用find这种方式来处理




robertaqi
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
专栏目录
[已解决]Argument list too long如何处理？
dideng8675的博客
01-17 2195
Argument list too long 本质是需要处理的长度超过系统的长度，因此无法执行相关命令。 经过搜索发现了两种方法，思想都是将参数切分成小的段落进行执行。 法一：通过xargs传递参数 (数据量大了还是不太奏效) find . -name "*.log" | xargs -0 rm ls | xargs -t -I {} mv {} ../matchres/ 可以把当前目...
Linux下出现 “Argument list too long”错误的解决
最实用的Linux博客
02-10 3907
 原贴:http://www.linuxidc.com/Linux/2008-02/11043.htmLinux下出现 “Argument list too long”错误的解决mv [a-l]* ../directory2mv [m-z]* ../directory2这是4种方法里最简单的,但是远非理想的方法。你必须有办法平均分割文件，而且对于文件数目极多的情况，需要输入N遍
一次解决 青龙面板互助、容器ck数量上限 Argument list too long报错问题的教程
FishBean的博客
12-18 1万+
1. 在群文件下载task_before 和 code.sh 两个文件 （QQ群550894783）（文件不需要改动） code.sh 放在 /root/容器名/scripts文件夹下 task_before 放在/root/容器名/config 文件夹下 2. 加定时 在青龙面板添加任务 点击确定就可以啦 ...
解决find命令的Argument list too long错误
最新发布
wgz7747147820的博客
04-30 333
如果一个目录中的相关文件数过多 会碰到Argument list too long错误。
linux下解决: Argument list too long问题
05-22 1198
-bash: /usr/bin/cp: Argument list too long 使用mv命令也是如此。 找到大神提供的解决方案是使用for循环解决: for i in oldPath/*; do cp "$i" newPath/; done 以上方法同样适用于mv，rm等命令
青龙互助+轮换工具人+Argument list too long问题解决 教程（2022年3月2日更新）
FishBean的博客
02-24 6624
青龙互助+轮换工具人+Argument list too long问题解决 小白教程
Laravel 5.4中migrate报错: Specified key was too long error的解决
12-19
但方便的同时也会伴随着一些问题，下面这篇文章将详细给大家介绍关于Laravel5.4中migrate报错Specified key was too long error的解决方法，下面话不多说了，来一起看看详细的介绍吧。 发现问题 Laravel 5.4默认使用...
linux shell脚本学习xargs命令使用详解
01-10
xargs是给命令传递参数的一个过滤器，也是组合多个命令的一个工具。它把一个数据流分割为一些足够小的块，以方便过滤器和命令进行...1. 当你尝试用rm 删除太多的文件，你可能得到一个错误信息：/bin/rm Argument list
c++ std::invalid_argument应用
09-05
在C++编程中，`std::invalid_argument` 是一个异常类，用于表示当函数或方法接收到不合法或无效的参数时抛出的错误。这个类是`std::logic_error` 的子类，而`std::logic_error` 又是`std::exception` 的子类。`std::...
synology-wireguard:WireGuard对某些Synology NAS驱动器的支持
05-01
WireGuard对Synology NAS的支持 该软件包增加了对Synology NAS驱动器的WireGuard支持。 它提供了WireGuard内核模块和wg / wg-quick命令。 免责声明 ... 您将收到错误消息Error: argument "suppress_pre
当make执行遇到 Arguments too long
04-09
gcc 4.1 package
/usr/bin/find: Argument list too long报错，如何解决
weixin_45787695的博客
10-08 4754
日常运维问题
SSH登录后系统不停刷日志-bash: /usr/bin/id: Argument list too long等
Delphinidae
10-09 3137
问题：SSH登录centos7系统后不停的刷日志，输入命令不生效 问题原因：配置了/etc/profile文件，文件中错误配置导致的。如我在文件末尾添加了source /etc/profile 引起了本次问题。 注意：系统级别环境变量谨慎修改 修复办法：进入单用户模式，修改profile文件。 错误日志： -bash: /usr/bin/id: Argument list too long -ba...
解决argument list too long错误
lepton126的专栏
04-18 2142
一个目录有2万个左右的json小文件，大小只有100k上下，当需要合成一个大文件时，无论是ls 还是 cat 命令时都会报argument list too long 错误，下面用两条命令来解决find   ./目录名 -type f -name '*.txt' -exec cat {} \; >文件名.txt目录名下是有2万个小文件，文件名是最后合成一个大文件的文件名sed -i "s/^...
解决参数列表过长的问题
wowerqq7的博客
09-20 3178
ls | xargs -t -I {} mv {} ../dir/    #将当前目录下的文件移动到../matchres 模仿 完成cat参数列表过长问题 ls | xargs -t -I {} cat {} >> all
Linux删除大量文件时遭遇Argument list too long的解决方法
weixin_43230594的博客
11-06 629
Linux删除大量文件时遭遇Argument list too long的解决方法
bash: /bin/rm: 参数列表过长
weixin_34324081的博客
06-27 1725
为什么80%的码农都做不了架构师？>>> ...
linux脚本报错参数太多,linux批量操作时提示Argument list too long解决方法
weixin_31132687的博客
05-03 2568
第一种情况：在实际使用过程中，若一个目录下文件或文件夹太多，在执行“*” 命令时 会提示Argument list too long，如rm -rf /tmp/*命令下。解决方案：ls | xargs ­n 10 rm ­rf lsSSH执行以上命令，输出所有的文件名(用空格分割) xargs就是将ls的输出，每10个为一组(以空格为分隔符)，作为rm ­rf的参数 也就是说将所有文件名10个为一...
聊聊 Linux Argument list too long 问题的N种解法
热门推荐
一得同学
05-11 1万+
删除数百万文件的各种姿势，争取一篇给你讲全了！
/bin/rm :argument list too long
06-06
这个错误提示通常是由于你想要删除太多的文件或者文件名过长导致的。可以尝试使用find命令来删除这些文件，比如： ``` find /path/to/files -type f -name "filename*" -delete ``` 这个命令会在指定的路径下查找所有以"filename"开头的文件，并删除它们。如果你需要删除的文件比较多，可以使用xargs命令来优化删除效率，比如： ``` find /path/to/files -type f -name "filename*" | xargs rm ``` 这个命令会将find命令查找到的所有文件名作为参数传递给rm命令，从而避免了"argument list too long"这个错误。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值