Linux查看文件夹大小以及删除大量文件方法

前言

有时候Linux主机磁盘占用过多，需要进行手动清理，一方面是查看文件夹占用大小，另一方面是进行文件的高效删除。
例如：
df -h 命令可以看到整个磁盘的状态情况，如何查看磁盘下文件夹的大小以及高效删除是本文讨论的重点。

1.文件夹占用大小查看

cd 进需要查看的文件夹路径，并使用如下命令

ls -lh

扩展，ls的其他命令使用

ls -l                    # 以长格式显示当前目录中的文件和目录
ls -a                    # 显示当前目录中的所有文件和目录，包括隐藏文件
ls -lh                   # 以人类可读的方式显示当前目录中的文件和目录大小
ls -t                    # 按照修改时间排序显示当前目录中的文件和目录
ls -R                    # 递归显示当前目录中的所有文件和子目录
ls -l /etc/passwd        # 显示/etc/passwd文件的详细信息

有些系统可能不生效，也可以尝试如下命令(以查看home路径为例)：
cd /home & du -h --max-depth=3
lsof | grep deleted --exclude /root

2.内网主机间备份文件

可以使用SCP命令，将需要删除的文件夹或者重要数据先迁移到其他内网主机：

#格式：scp【本地文件夹的路径】【服务器用户名】@【服务器地址】：【服务器上存放文件的路径】
scp -r -P22 /home/source root@192.168.1.5:/home/dest

扩展：

scp【本地或远程文件的路径】【服务器用户名】@【服务器地址】：【远程或本地文件的路径】
-1： 强制scp命令使用协议ssh1
-2： 强制scp命令使用协议ssh2
-4： 强制scp命令只使用IPv4寻址
-6： 强制scp命令只使用IPv6寻址
-B： 使用批处理模式（传输过程中不询问传输口令或短语）
-C： 允许压缩。（将-C标志传递给ssh，从而打开压缩功能）
-p：保留原文件的修改时间，访问时间和访问权限。
-q： 不显示传输进度条。
-r： 递归复制整个目录。
-v：详细方式显示输出。scp和ssh(1)会显示出整个过程的调试信息。这些信息用于调试连接，验证和配置问题。
-c cipher： 以cipher将数据传输进行加密，这个选项将直接传递给ssh。
-F ssh_config： 指定一个替代的ssh配置文件，此参数直接传递给ssh。
-i identity_file： 从指定文件中读取传输时使用的密钥文件，此参数直接传递给ssh。
-l limit： 限定用户所能使用的带宽，以Kbit/s为单位。
-o ssh_option： 如果习惯于使用ssh_config(5)中的参数传递方式，
-P port：注意是大写的P, port是指定数据传输用到的端口号
-S program： 指定加密传输时所使用的程序。此程序必须能够理解ssh(1)的选项。

可以看到内网主机间传输文件的速度还是非常快的。

3. 高效删除大量文件

读到一篇文章，Linux 下删除大量文件效率对比，看谁删的快，里面提到rm命令在删除多个文件夹层级的大文件时，效率很低。但顾及方便性和实测效果，最终还是选择利用rm命令，但是是以多进程的方式，也可以实现文件的快速删除。具体操作步骤如下：
（1）进入想删除的路径下，例如：

（2）使用nohup多次执行如下命令

#删除1、2、3开头的文件夹
nohup rm -rf 0* 1* 2* &

原理：nohup可以放置在后台运行，每执行一次，相当于开启一个进程去删除文件，开启多个进程同时删除，实测可以提升删除效率。后续输入命令时也可以切换一下顺序，例如：

nohup rm -rf 2* 1* 0*  &

放到后台运行后就不用管了，过一会就会发现需要清理的文件就被删除掉了。

4.删除指定时间前的文件

在Shell中删除指定时间前的文件，可以使用find命令结合-mtime或-mmin选项来查找并删除文件。

# 删除30天之前的文件
find /root/log/ -type f -mtime +30 -exec rm {} \;

# 删除60分钟之前的文件
find /root/log/ -type f -mmin +60 -exec rm {} \;

# 查找指定名称目录下，指定名称的文件，进行删除
find /root/log* -mtime +2 -type f -name "*.log" -exec rm {} \;

在上面的命令中：

• /path/to/directory 是要搜索的目录路径。
• -mtime +30 表示查找修改时间在30天之前的文件。类似地，-mmin +60 表示查找修改时间在60分钟之前的文件。
• -type f 表示只查找普通文件，而不包括目录或其他特殊文件。f为文件，d为文件夹。
• -name 表示需要删除的文件名，或可以进行后缀通配符。
• -exec rm {} ; 是find命令中用来执行特定操作的部分。在这里，-exec参数表示执行后面指定的命令，rm是要执行的命令，{}代表find命令找到的文件名，在每次执行时会被替换为实际的文件名，;表示命令的结束。所以，-exec rm {} ; 就是告诉find命令对于每一个找到的文件执行rm命令来删除它们。

请确保在运行这些命令之前仔细检查路径和条件，以免意外删除重要文件！！！