LINUX一键删除大批量文件

已于 2024-02-27 18:19:56 修改
阅读量357 收藏 10
点赞数 11
文章标签： linux 运维 服务器
于 2024-02-27 17:22:38 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/2302_78667476/article/details/136327782
版权
文章讲述了如何修改脚本以连接数据库，查询文件位置，生成JSON文件，处理FDFS路径，检查MP4文件路径，以及在容器环境中进行文件删除的操作流程。
摘要由CSDN通过智能技术生成

找出文件所在的json文件

修改第一个脚本中PG的连接信息，然后修改下方箭头处的库，从哪些库中查询，生成的文件为1.txt，找出数据库的json文件

1.sh

找出大批量文件的具体位置，并生成文件

修改fdfs需要找出文件的路径，以及数据库的json文件，全文搜索，生成一个del_full_path_json.txt的文件，找出MP4文件的具体位置。

found_not_in_db_json.sh

查看生成的del_full_path_json.txt文件中的MP4的路径是否正确，如果不正确需要用sed修改为一致。

将上面生成的文件，和删除脚本放在容器的映射目录下

下方图片中要删除文件的json文件名字要和上面第二步生成的文件对照，修改容器配置文件中client.conf的位置，将第二步生成的文件和del_fdfs_json.sh脚本放在容器映射的目录下

del_fdfs_json.sh

进入容器执行脚本，一键删除大批量文件

吗喽袁
关注
  • 11
    点赞
  • 踩
  • 10
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
linux一键安装mysql5.7和mysql8.0脚本
02-08
该包中包含一键安装mysql5.7和mysql8.0脚本，分为mysql二进制包安装和yum安装，并一起部署MySQL备份策略 用于快速部署mysql场景，适合多项目快速部署 备份工具为xtrabackup
技能包！Linux 下清空或删除大文件内容的 5 种方法_linux 清空xml文件内容(1)
最新发布
2301_78416732的博客
05-12 473
在 Linux 中， null 设备基本上被用来丢弃某个进程不再需要的输出流，或者作为某个输入流的空白文件，这些通常可以利用重定向机制来达到，所以 /dev/null 设备文件是一个特殊的文件，它将清空送到它这里来的所有输入，而它的输出则可被视为一个空文件。字符串表明它是一个具体的事物，只不过它的内容可能是空的，但 null 则意味着某个事物并不存在。基于这个原因，当你将 echo命令 的输出作为输入重定向到文件后，使用cat命令来查看该文件的内容时，你将看到一个空白行（即一个空字符串）。
linux 快速删除大量/大文件
jacke121的专栏
06-25 8665
linux 快速删除大量/大文件 1、快速删除大量文件： 假如你要在linux下删除大量文件，比如100万、1000万，像/var/spool/clientmqueue/的mail邮件，/usr/local/nginx/proxy_temp的nginx缓存等，那么rm -rf *可能就不好使了。 rsync 可以用来清空目录或文件，如下： 1）先建立一个空目录 mkdir/data/blank 2）用rsync删除目标目录 rsync--delete-before -d /data/blank/
linux删除大量文件的6种方法
Hehuyi_In的博客
09-08 4503
首先建立50万个文件 test for i in $(seq 1 500000) for> do for> echo test >>$i.txt for> done 1. rm test time rm -f * zsh: sure you want to delete all the files in /home/hungerr/test [yn]? y zsh: argument list too long: rm rm -f * 3.63s user 0
linux 快速删除大量小文件（数十万级别）
暖树的博客
08-03 4695
当我们在linux系统中要删除数万或者数十万甚至数百万的文件时使用rm -rf *就不太好用，因为要等待很长一段时间。
Linux 下清空或删除大文件内容的 5 种方法
weixin_43813200的博客
07-18 7670
清除正在运行的垃圾大文件
linux 一键启动 jar包 批处理脚本
11-15
linux 一键启动 jar包 批处理脚本,适用于java 项目，spring boot 一键启动，停止，重启 等，代码简洁，可直接使用.
linux一键部署nginx的脚本
09-23
linux一键部署nginx的脚本，非本人编写，自用，详情请看https://cloud.tencent.com/developer/article/1934326 侵权请联系我删除
Linux服务器操作系统快速删除大量/大文件
Enweitech Software Works
01-18 4192
前言 注意本文说的“海量”并不是指体积大，而是指数量，比如一个目录下有数百万个小文件。最近在优化服务器时发现postfix下的maildrop目录和clientmqueue目录还有var目录下发现有大量的文件，进入这些目录里使用ls命令是愚蠢的做法，而直接执行rm *， 没有任何反应，文件数量也没有减少，也就是说，在海量文件目录里直接使用rm命令进行删除是无效的。 常规方法： 那么正确的方法是什么呢？有两种方法可选： 第一种： 1 find /path/to/dir.
Linux下删除大量文件
06-01
描述Linux下使用rsync删除大量文件的技术文档
如何快速清空 Linux 中的大文件
Linuxprobe18的博客
02-07 1040
导读 本文总结了几种快速清空Linux中的大文件方法，快来看看对你有帮助吗？ 1. 通过重定向到null清空文件内容 使用shell重定向null(不存在的对象)到文件的最简单方法来清空文件内容 #>access.log 2.使用true命令重定向清空文件 这里我们将使用一个符号,:是一个shell内置命令，本质上等同于true命令 另一种方法是将:或true内置命令的输出重定向到文件 #:>access.log OR #true>acce...
Linux 快速删除大量小文件方法
热门推荐
Cynric 的博客
12-12 4万+
Linux 快速删除大量小文件方法     当我们在linux系统中要删除数万或者数十万甚至数百万的文件时使用rm -rf *就不太好用，因为要等待很长一段时间。在这种情况之下我们可以使用linux系统命令rsync来巧妙的处理。rsync实际上用的是替换原理，处理数十万个文件也是秒删。     1. rsync安装，有些系统默认安装有该命令 ubuntu系统：sudo apt-ge
linux下删除大量文件提示参数过长解决办法和查看文件夹内包含文件数量
风中落泪的花
03-26 2432
linux下删除大量文件提示参数过长解决办法转载：https://blog.csdn.net/ls198825/article/details/7529570在linux中删除大量文件时，直接用rm会出现：-bash: /bin/rm: 参数列表过长的错误。这时可以用find命令来结合使用。删除当前目录下文件名或文件夹名中包含name字段的文件：find . -name "name*" | xar...
Linux下面批量删除某种类型的文件
道亦无名
02-18 1万+
最近在项目中遇到了一个问题，删除一些不必要的文件，都是源文件。但是有些不能删除，只保留可执行文件。 这样批量删除体现了linux的高效性。 利用命令： find . -name "*.c" | xargs rm -rf 发现当前文件夹及其子目录下面都没有了.c文件。
linux 删除文件（批量删除文件）
上帝是个娘们的博客
04-23 2万+
一般的删除文件的操作 删除几个文件 rm 文件1 文件2 删除文件夹下面所有文件 rm * -rf 删除某些固定字母开头的文件 rm xxx* 删除一类文件 rm *.txt 批量删除文件 首先查找我们要删除的某类批量的文件： find . -maxdepth 1 -regex ".*ws.*" maxdepth参数为1表示只在当前目录查找，不递归查找子目录 regex参数...
Linux下快速删除大量文件/文件夹方法
梦想专栏
07-12 2万+
一、场景描述  假如你要在linux下删除大量文件，比如100万、1000万，像/var/spool/clientmqueue/的mail邮件， 像/usr/local/nginx/proxy_temp的nginx缓存等，那么rm -rf *可能就不好使了。 二、解决方案 rsync提供了一些跟删除相关的参数 rsync --help | grep dele
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值