删除文件后磁盘空间没释放,是因为文件被进程打开,进程还持有文件描述符。用 lsof | grep deleted 找到占用进程,最好的方法是在线清空文件。
现象
在 Linux 或者 Unix 系统中,通过 rm 或者文件管理器删除文件,磁盘空间却没有释放。
根因
通过 rm 删除文件,只是将它从文件系统的目录结构上解除链接(unlink),也就是说只是删除了文件和系统目录结构的链接。
如果文件在删除时是被打开的(有一个进程正在使用该文件,文件被进程锁定或者有进程一直在向这个文件写数据等)状态,那么进程将仍然可以读取该文件,进程还持有文件的文件描述符 fd,所以磁盘空间也就会一直被占用。
一个文件在文件系统中的存放分为两个部分:数据部分和指针部分。
- 指针位于文件系统的 meta-data 中,数据被删除后,这个指针就从 meta-data 中清除了;
- 而数据部分存储在磁盘中,数据对应的指针从 meta-data 中清除后,文件数据部分占用的空间就可以被覆盖并写入新的内容;
- 之所以出现删除文件后空间还没释放,就是因为有进程还在一直向这个文件写入内容,导致虽然删除了文件,但文件对应的指针部分由于进程锁定,并未从 meta-data 中清除;
- 而由于指针并未被删除,那么系统内核就认为文件并未被删除,因此通过
df命令查询空间并未释放也就不足为奇了。
解决办法
1. 找到占用进程并 kill
通过 lsof | grep deleted 命令获取到已经被删除但是仍然被应用程序占用的文件列表,然后 kill 掉还在占用所删除文件的进程。
需要注意的是:如果有很多进程都在使用所删除文件,那么采用这种方式 kill 进程就有点麻烦了,而且风险也比较大。
因为 kill 进程是通过截断 proc 文件系统中的文件可以强制要求系统回收分配给正在使用的文件。
必须要确定不会对运行中的进程造成影响时才能使用,应用程序对这种方式支持的并不好,当一个正在使用的文件被截断可能会引发不可预知的问题。
2. 停掉或重启应用
停掉或重启使用这个所删除文件的应用,让 OS 自动回收磁盘空间。
3. 重启操作系统
也可以重启操作系统,不过这并不是最好的方法。
4. 在线清空文件(推荐)
对待这种进程不停对文件写日志的操作,要释放文件占用的磁盘空间,最好的方法是在线清空这个文件。
通过这种方法,磁盘空间不但可以马上释放,也可保障进程继续向文件写入日志。
在线清空文件(比如 /var/log/app.log)的方式:
echo " " > /var/log/app.log
cat /dev/null > /var/log/app.log
> /var/log/app.log
小结
- 删除文件只是解除链接(unlink),不是真正释放空间;
- 文件被进程打开时,进程还持有文件描述符,空间一直被占用;
- 用
lsof | grep deleted找到占用进程; - 最好的方法是在线清空文件(
> file),既释放空间又保障进程继续写日志; - kill 进程有风险,要确定不会影响运行中的进程。