Linux磁盘文件被删除，但是空间未释放（deleted）

最新推荐文章于 2024-06-25 13:22:56 发布
最新推荐文章于 2024-06-25 13:22:56 发布
阅读量3.2k 收藏 3
点赞数
分类专栏： Linux 文章标签： linux 服务器 运维
原文链接：https://blog.csdn.net/u014730165/article/details/82147150?spm=1001.2101.3001.6650.1&utm_medium=distribute.pc_relevant.none-task-blog-2%7Edefault%7ECTRLIST%7Edefault-1.no_search_link&depth_1-utm_source=distribute.pc_relevant.none-task-blog-2%7Edefault%7ECT
版权

问题描述：

警告文件磁盘已经满了，通过：df -h， du -sh * 等指令配合使用，发现当前系统任然存在大量可以使用的空间。大量剩余的磁盘空间不清楚怎么丢失了…

原因分析：

通过指令：lsof | grep deleted 指令，查看当前系统句柄未释放情况

[root@bigdata-hadoop2:/proc/21893/fd]# lsof | grep deleted
zabbix_ag  1791        zabbix    3wW     REG              253,1         4     132502 /var/tmp/zabbix_agentd.pid (deleted)
zabbix_ag  1806        zabbix    3w      REG              253,1         4     132502 /var/tmp/zabbix_agentd.pid (deleted)
zabbix_ag  1807        zabbix    3w      REG              253,1         4     132502 /var/tmp/zabbix_agentd.pid (deleted)
zabbix_ag  1808        zabbix    3w      REG              253,1         4     132502 /var/tmp/zabbix_agentd.pid (deleted)
python     3946          root   14w      REG              253,1         0     393228 /tmp/cmflistener-stderr---agent-3916-1532518455-HYSskK.log (deleted)
catalogd  21893        impala  254r      REG              253,1 163923099     393230 /tmp/225e43c3-03a8-4b24-ba2e-14637e4d5bba.jar (deleted)
catalogd  21893        impala  255r      REG              253,1  77023830     396109 /tmp/ee702167-27f2-4685-8217-8cec85f53a3c.jar (deleted)
catalogd  21893        impala  258r      REG              253,1  72198042     393231 /tmp/2aeb7bb8-5bed-402d-9201-5c23859754d3.jar (deleted)
catalogd  21893        impala  259r      REG              253,1  72198042     396110 /tmp/9a5ce9d5-fa60-465c-b400-3ea2eeca9a45.jar (deleted)
catalogd  21893        impala  260r      REG              253,1         1     396111 /tmp/fc8ba5b5-ddd8-4317-9e18-bd335584c04f.jar (deleted)
catalogd  21893        impala  262r      REG              253,1 153712947     396112 /tmp/a7378ee0-82cf-4435-b05d-5fbe8248942b.jar (deleted)
catalogd  21893        impala  265r      REG              253,1         1     396113 /tmp/f29f8a20-060f-4286-84e6-b1a958604c8c.jar (deleted)
catalogd  21893        impala  267r      REG              253,1 153714277     396114 /tmp/5fdd988e-fbfa-43ae-a790-c277cab2304b.jar (deleted)
catalogd  21893        impala  269r      REG              253,1         1     396115 /tmp/e37795e5-f53f-49da-8b21-27516241c95f.jar (deleted)
catalogd  21893        impala  270r      REG              253,1         1     396183 /tmp/b0f21624-5850-4c60-b2f4-125656d5ac40.jar (deleted)
catalogd  21893  2502  impala  254r      REG              253,1 163923099     393230 /tmp/225e43c3-03a8-4b24-ba2e-14637e4d5bba.jar (deleted)
catalogd  21893  2502  impala  255r      REG              253,1  77023830     396109 /tmp/ee702167-27f2-4685-8217-8cec85f53a3c.jar (deleted)
catalogd  21893  2502  impala  258r      REG              253,1  72198042     393231 /tmp/2aeb7bb8-5bed-402d-9201-5c23859754d3.jar (deleted)
catalogd  21893  2502  impala  259r      REG              253,1  72198042     396110 /tmp/9a5ce9d5-fa60-465c-b400-3ea2eeca9a45.jar (deleted)
catalogd  21893  2502  impala  260r      REG              253,1         1     396111 /tmp/fc8ba5b5-ddd8-4317-9e18-bd335584c04f.jar (deleted)
catalogd  21893  2502  impala  262r      REG              253,1 153712947     396112 /tmp/a7378ee0-82cf-4435-b05d-5fbe8248942b.jar (deleted)
catalogd  21893  2502  impala  265r      REG              253,1         1     396113 /tmp/f29f8a20-060f-4286-84e6-b1a958604c8c.jar (deleted)
catalogd  21893  2502  impala  267r      REG              253,1 153714277     396114 /tmp/5fdd988e-fbfa-43ae-a790-c277cab2304b.jar (deleted)
catalogd  21893  2502  impala  269r      REG              253,1         1     396115 /tmp/e37795e5-f53f-49da-8b21-27516241c95f.jar (deleted)
catalogd  21893  2502  impala  270r      REG              253,1         1     396183 /tmp/b0f21624-5850-4c60-b2f4-125656d5ac40.jar (deleted)
catalogd  21893  5443  impala  254r      REG              253,1 163923099     393230 /tmp/225e43c3-03a8-4b24-ba2e-14637e4d5bba.jar (deleted)
catalogd  21893  5443  impala  255r      REG              253,1  77023830     396109 /tmp/ee702167-27f2-4685-8217-8cec85f53a3c.jar (deleted)
catalogd  21893  5443  impala  258r      REG              253,1  72198042     393231 /tmp/2aeb7bb8-5bed-402d-9201-5c23859754d3.jar (deleted)
catalogd  21893  5443  impala  259r      REG              253,1  72198042     396110 /tmp/9a5ce9d5-fa60-465c-b400-3ea2eeca9a45.jar (deleted)
catalogd  21893  5443  impala  260r      REG              253,1         1     396111 /tmp/fc8ba5b5-ddd8-4317-9e18-bd335584c04f.jar (deleted)
catalogd  21893  5443  impala  262r      REG              253,1 153712947     396112 /tmp/a7378ee0-82cf-4435-b05d-5fbe8248942b.jar (deleted)
catalogd  21893  5443  impala  265r      REG              253,1         1     396113 /tmp/f29f8a20-060f-4286-84e6-b1a958604c8c.jar (deleted)
catalogd  21893  5443  impala  267r      REG              253,1 153714277     396114 /tmp/5fdd988e-fbfa-43ae-a790-c277cab2304b.jar (deleted)
catalogd  21893  5443  impala  269r      REG              253,1         1     396115 /tmp/e37795e5-f53f-49da-8b21-27516241c95f.jar (deleted)
catalogd  21893  5443  impala  270r      REG              253,1         1     396183 /tmp/b0f21624-5850-4c60-b2f4-125656d5ac40.jar (deleted)
catalogd  21893  5834  impala  254r      REG              253,1 163923099     393230 /tmp/225e43c3-03a8-4b24-ba2e-14637e4d5bba.jar (deleted)
catalogd  21893  5834  impala  255r      REG              253,1  77023830     396109 /tmp/ee702167-27f2-4685-8217-8cec85f53a3c.jar (deleted)
catalogd  21893  5834  impala  258r      REG              253,1  72198042     393231 /tmp/2aeb7bb8-5bed-402d-9201-5c23859754d3.jar (deleted)
catalogd  21893  5834  impala  259r      REG              253,1  72198042     396110 /tmp/9a5ce9d5-fa60-465c-b400-3ea2eeca9a45.jar (deleted)
catalogd  21893  5834  impala  260r      REG              253,1         1     396111 /tmp/fc8ba5b5-ddd8-4317-9e18-bd335584c04f.jar (deleted)
catalogd  21893  5834  impala  262r      REG              253,1 153712947     396112 /tmp/a7378ee0-82cf-4435-b05d-5fbe8248942b.jar (deleted)
catalogd  21893  5834  impala  265r      REG              253,1         1     396113 /tmp/f29f8a20-060f-4286-84e6-b1a958604c8c.jar (deleted)
catalogd  21893  5834  impala  267r      REG              253,1 153714277     396114 /tmp/5fdd988e-fbfa-43ae-a790-c277cab2304b.jar (deleted)
catalogd  21893  5834  impala  269r      REG              253,1         1     396115 /tmp/e37795e5-f53f-49da-8b21-27516241c95f.jar (deleted)
catalogd  21893  5834  impala  270r      REG              253,1         1     396183 /tmp/b0f21624-5850-4c60-b2f4-125656d5ac40.jar (deleted)
catalogd  21893  6688  impala  254r      REG              253,1 163923099     393230 /tmp/225e43c3-03a8-4b24-ba2e-14637e4d5bba.jar (deleted)
catalogd  21893  6688  impala  255r      REG              253,1  77023830     396109 /tmp/ee702167-27f2-4685-8217-8cec85f53a3c.jar (deleted)
catalogd  21893  6688  impala  258r      REG              253,1  72198042     393231 /tmp/2aeb7bb8-5bed-402d-9201-5c23859754d3.jar (deleted)
catalogd  21893  6688  impala  259r      REG              253,1  72198042     396110 /tmp/9a5ce9d5-fa60-465c-b400-3ea2eeca9a45.jar (deleted)
catalogd  21893  6688  impala  260r      REG              253,1         1     396111 /tmp/fc8ba5b5-ddd8-4317-9e18-bd335584c04f.jar (deleted)
catalogd  21893  6688  impala  262r      REG              253,1 153712947     396112 /tmp/a7378ee0-82cf-4435-b05d-5fbe8248942b.jar (deleted)
catalogd  21893  6688  impala  265r      REG              253,1         1     396113 /tmp/f29f8a20-060f-4286-84e6-b1a958604c8c.jar (deleted)
catalogd  21893  6688  impala  267r      REG              253,1 153714277     396114 /tmp/5fdd988e-fbfa-43ae-a790-c277cab2304b.jar (deleted)
catalogd  21893  6688  impala  269r      REG              253,1         1     396115 /tmp/e37795e5-f53f-49da-8b21-27516241c95f.jar (deleted)
catalogd  21893  6688  impala  270r      REG              253,1         1     396183 /tmp/b0f21624-5850-4c60-b2f4-125656d5ac40.jar (deleted)
catalogd  21893  6689  impala  254r      REG              253,1 163923099     393230 /tmp/225e43c3-03a8-4b24-ba2e-14637e4d5bba.jar (deleted)
catalogd  21893  6689  impala  255r      REG              253,1  77023830     396109 /tmp/ee702167-27f2-4685-8217-8cec85f53a3c.jar (deleted)
catalogd  21893  6689  impala  258r      REG              253,1  72198042     393231 /tmp/2aeb7bb8-5bed-402d-9201-5c23859754d3.jar (deleted)
catalogd  21893  6689  impala  259r      REG              253,1  72198042

通过结果可以发现，当前系统存在大量文件已经被删除（deleted），可是文件句柄并没有被释放的情况。

问题已经有答案了，因为系统中存在大量文件句柄没有释放，导致当前占用的磁盘空间无法释放。文件句柄释放不掉的根本原因，是因为当前有线程对句柄进行引用。

解决方案：

通过查询发现，有两种解决方案：

  1. 将当前线程进行重启，关闭线程，从而让句柄释放，释放空间
  2. 找到指定的文件句柄，将当前文件句柄的大小设置为空

根据当前的业务情况，需要对外提供实时服务，所以频繁重启不适合当前业务场景，那么只能选择将文件句柄内容置空。文件句柄内容置空，文件的内容大小被置空，释放了磁盘空间，但是文件句柄并没有释放，可能导致【Too Many File is Open】 错误。

lsof输出各列信息的意义如下：

lsof
command     PID USER   FD      type             DEVICE     SIZE       NODE NAME

lsof输出各列信息的意义如下：

COMMAND：进程的名称
PID：进程标识符
PPID：父进程标识符（需要指定-R参数）
USER：进程所有者
PGID：进程所属组
FD：文件描述符，应用程序通过文件描述符识别该文件。

通过losf 获取当前文件的 PID 和 FD 两个参数
置空当前的文件内容：

echo > /proc/PID/fd/FD

原文链接：https://blog.csdn.net/u014730165/article/details/82147150?spm=1001.2101.3001.6650.1&utm_medium=distribute.pc_relevant.none-task-blog-2%7Edefault%7ECTRLIST%7Edefault-1.no_search_link&depth_1-utm_source=distribute.pc_relevant.none-task-blog-2%7Edefault%7ECTRLIST%7Edefault-1.no_search_link

迷途的小西瓜
关注
  • 0
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Linux系统批量释放deleted文件占用的空间
企业实战系列集 ●●● https://ximenjianxue.blog.csdn.net
09-16 3168
现场某业务系统迁移到新的资源池后，后端java程序不定时遇到程序所在磁盘被占满的情况，实际有效数据并没有那么大，磁盘200G，有效数据只有42G，但磁盘使用率会报道98%，触发文件使用率告警。上述造成文件系统被占满的原因就是，该业务下的临时目录temp下存储临时上传文件，该文件呗删除后显示deleted状态，但只要程序运行，该文件所占空间并不会得到释放，日积月累，导致文件系统被爆。最简单的就是kill掉服务进程，然后重启，相关文件释放后，文件系统空间也就被释放；然后用定时任务，每4h检查一次就行。
Linux文件删除，但是磁盘空间没有释放
weixin_45042652的博客
08-16 1771
1、环境 Linux服务器 2、需求 因为接口需要压测，导致服务器生成大量文件 3、错误现象 Linux 磁盘空间总是报警，查到大量文件，删除之后，df看到磁盘空间并没有释放。 4、原因分析 因为Linux对删除操作没有回收站机制，对rm操作进行了自定义，对删除文件进行移动到/tmp 目录里面。又对/temp删除 但是还是没有发现磁盘空间释放 5、解决方法 最简单的方法是关闭或者重启httpd进程，当然也可以重启操作系统，不过这并不是最好的方法，对待这种进程不停对文件写日志的操作，要释放文件占用的磁盘空间，
Linux删除文件磁盘空间未释放解决办法
最新发布
Think
06-25 792
工作中经常遇到Linux系统磁盘空间不足，但是删除后较大的日志文件后，发现磁盘空间仍没有被释放。
Linux文件已删除，引用未释放（deleted）
热门推荐
有信仰的蜗牛
08-28 2万+
问题描述： 警告文件磁盘已经满了，通过：df -h， du -sh * 等指令配合使用，发现当前系统任然存在大量可以使用的空间。大量剩余的磁盘空间不清楚怎么丢失了… 问题重现： 通过指令：lsof | grep deleted 指令，查看当前系统句柄未释放情况 [root@bigdata-hadoop2:/proc/21893/fd]# lsof | grep deleted ...
【解决问题】排查linux手动删除文件，但是文件标记为deleted，资源未释放
qiuxuezhe_fei的博客
04-02 1072
排查linux手动删除文件，但是文件标记为deleted，资源未释放
linux deleted文件占用系统存储资源
洪肥肥的博客
09-06 892
系统盘查看文件占用空间不多，但是显示资源已使用100%，可能是活跃的进程正在写入的文件被删除了
Linux磁盘空间被未知资源耗尽的解决方法
09-15
例如，如果一个程序（如MySQL）在删除文件后未正确关闭文件句柄，该文件的磁盘空间就不会被回收。 解决这个问题的关键在于找到这些被占用但已删除的文件。可以使用`lsof`命令来列出所有打开的文件，包括那些已被...
Linux文件删除后空间未释放问题详解
01-20
其实不然，linux的回收站功能想了解的可以与我沟通或查资料了解一下,也是个比较实用的方法，此处我们主要实践文件删除后空间未释放问题。 1、 实验准备 想模拟该场景的方式很多，主要是实现文件被占用的场景。最...
Linux服务器文件删除空间未释放的问题
01-09
　这样会导致我们明明删除了文件，但是磁盘空间却未被释放 　二、问题分析 　1、首先获得一个已经被删除但是仍然被应用程序占用的文件列表 root@instance-zo0fkfng:~# lsof|grep deleted init 1 root 10w ...
关于Linux服务器磁盘空间占满问题的解决方法
09-15
这里出现了一个常见问题：尽管文件被删除，但如果文件被某些进程仍在使用（即打开的文件描述符），那么磁盘空间不会立即释放。可以使用 `lsof` 命令查找被进程占用但已被删除的文件。在案例中，`lsof | grep -i ...
linux中的echo%3e文件,Linux文件已删除，引用未释放（deleted）
weixin_42667269的博客
04-28 280
问题描述：警告文件磁盘已经满了，通过：df -h， du -sh * 等指令配合使用，发现当前系统任然存在大量可以使用的空间。大量剩余的磁盘空间不清楚怎么丢失了…问题重现：通过指令：lsof | grep deleted 指令，查看当前系统句柄未释放情况[root@bigdata-hadoop2:/proc/21893/fd]# lsof | grep deletedzabbix_ag 1791...
【转载】Linux文件已删除，引用未释放（deleted）
eudemonicli的博客
10-27 221
警告文件磁盘已经满了，通过：df -h， du -sh * 等指令配合使用，发现当前系统任然存在大量可以使用的空间。大量剩余的磁盘空间不清楚怎么丢失了…版权声明：本文为CSDN博主「韭菜炒鸡蛋2021」的原创文章，遵循CC 4.0 BY-SA版权协议，转载请附上原文出处链接及本声明。原文链接：https://blog.csdn.net/u014730165/article/details/82147150。
linux恢复deleted状态的文件,Linux恢复被删除的文件 How To Recover Deleted Files From Your Linux System ....
weixin_28687807的博客
05-13 594
先介绍一些文件的基本概念, 文件实际上是一个指向inode的链接, inode链接包含了文件的所有属性, 比如权限和所有者, 数据块地址(文件存储在磁盘的这些数据块中). 当你删除(rm)一个文件, 实际删除了指向inode的链接, 并没有删除inode的内容. 进程可能还在使用. 只有当inode的所有链接完全移去, 然后这些数据块将可以写入新的数据.proc文件系统可以协助我们恢复数据. 每一...
通过文件描述符恢复误删除文件
weixin_30905133的博客
07-06 197
在 UNIX® 环境中，文件无处不在，这便产生了一句格言：“任何事物都是文件”。通过文件不仅仅可以访问常规数据，通常还可以访问网络连接和硬件。在有些情况下，当您使用 ls 请求目录清单时，将出现相应的条目。在其他情况下，如传输控制协议 (TCP) 和用户数据报协议 (UDP) 套接字，不存在相应的目录清单。但是在后台为该应用程序分配了一个文件描述符，无论这个文件的本质如何，该文件描述符为应用程序与...
linux磁盘文件删除磁盘空间未释放问题排查
游语
02-09 928
lsof |grep deleted 僵尸进程 Files.lines的坑 Files.list的坑
Linux取证之恢复已删除的二进制文件
weixin_55821558的博客
08-16 602
在彻底调查发生的情况之前，永远不要简单地杀死发现的可疑进程。如果要先终止该进程，则会丢失二进制文件，因为它会被文件系统释放并可能被破坏。如果系统感染了某些东西，请在网络上将其隔离，不要惊慌，花点时间，收集证据，然后在弄清楚发生了什么以及攻击是如何发生的（根本原因分析）之后重建系统。...
linux定期释放已删除文件空间脚本
mengbing1990的博客
03-01 334
如果程序没有停机时间，但是磁盘空间承受不了，就需要定期释放空间。利用crontab定期执行，直到程序可以重启，真正释放空间。以上脚本用于释放已删除未释放空间文件。
Linux中使用rm删除文件未释放磁盘
qq_40406380的博客
12-21 2187
在Linux系统中，通过rm或者文件管理器删除文件：只是将它会从文件系统的目录结构上解除链接(unlink)，也就是说只是删除了文件和系统目录结构的链接，如果文件在删除时是被打开的（有一个进程正在使用该文件，文件被进程锁定或者有进程一直在向这个文件写数据等）状态，那么进程将仍然可以读取该文件，也就是说没有删除掉文件在读取的状态，所以磁盘空间也就会一直被占用。
25.Linux系统中解决空间被占满问题——deleted,inode号
Pink_Home的博客
08-10 2095
1）关闭或者重启httpd进程，也可以重启系统。总结：通过这种方法，磁盘空间不但可以马上释放，也可保障进程继续向文件写入日志，这种方法经常用于在线清理Apache、Tomcat、Nginx等Web服务产生的日志文件。...
服务器文件删除后，释放空间Linux指令
06-09
然而，为了确保立即释放磁盘空间，你可以使用`sync`命令强制将内存中的数据写入磁盘，然后使用`fsync`或`fdatasync`命令同步特定文件系统的数据。最后，你可以使用`du -sh`检查空间占用情况，或者使用`rm`命令后加上...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值