查看磁盘占用情况
代码语言:javascript复制# 查看服务器磁盘空间整体情况
df -h
# 查看当前目录,哪个文件占用最大
du -h --max-depth=1
# 查看当前目录下各文件及目录占用大小
du -sh *
按文件类型日期查找文件并删除
代码语言:javascript复制# 不加 -maxdepth 则会遍历当前目录下所有子目录中所有文件
# 找出当前目录下不包含子目录1天之前的 log 文件并删除
find ./ -maxdepth 1 -name "*.log*" -mtime 0 -exec rm -rf {} ;
# 找出当前目录下不包含子目录3天之内的 .log 文件并删除
find ./ -maxdepth 1 -name "*.log*" -mtime -3 -exec rm -rf {} ;
其他参数
代码语言:javascript复制-mindepth n: 限定搜索指定目录的最小深度
-maxdepth n: 限定搜索指定目录的最大深度
atime 最后一次访问时间, 如 less, more 等, 但 chmod, chown, ls, stat 等不会修改些时间, 使用 ls -utl 可以按此时间顺序查看
ctime 最后一次状态修改时间, 如 chmod, chown 等状态时间改变但修改时间不会改变, 使用 stat file 可以查看
mtime 最后一次内容修改时间, 如 vi 保存后等, 修改时间发生改变的话, atime 和 ctime 也相应跟着发生改变
-ctime -n 查找距现在 n*24H 内修改过的文件
-ctime n 查找距现在 n*24H 前, (n 1)*24H 内修改过的文件
-ctime n 查找距现在 (n 1)*24H 前修改过的文件
[a|c|m]min [最后访问|最后状态修改|最后内容修改]分钟数(n*min)
[a|c|m]time [最后访问|最后状态修改|最后内容修改]天数(n*24H)
查看文件目录数量
代码语言:javascript复制# 查看当前目录下的文件数量(不包含子目录中的文件)
ls -l | grep "^-" | wc -l
# 查看当前目录下的文件数量(包含子目录中的文件)注意:R,代表子目录
ls -lR | grep "^-" | wc -l
# 查看当前目录下的目录个数(不包含子目录中的目录)
ls -l | grep "^d" | wc -l
# 查看当前目录下的目录数量(包含子目录中的目录)注意:R,代表子目录
ls -lR | grep "^d" | wc -l
# 统计所有以"test"开头的目录下的全部文件数量
ls -lR test*/|grep "^-"| wc -l
# 统计当前目录下42天前所有文件总共大小(单位字节)
find ./ -name "*.*" -mtime 42 -exec ls -l {} ;|awk 'BEGIN {SUM=0}{SUM =$5} END{print SUM}'
找出已经删除但空间未释放的大文件并清空
找出已经删除但磁盘空间未释放的文件,如果文件已经删除,但实际的磁盘空间未释放,这个时候文件句柄 fd 相关信息还在内存中,可以通过 lsof 命令找出,比如打开文件的pid和读写文件的系统fd。
代码语言:javascript复制# yum -y install lsof
# lsof |grep -i delete
java 20302 5351 hbase 3w REG 253,1 25778031203 43040 /var/log/hbase/gc.log-201812251535 (deleted)
java 20302 5354 hbase 3w REG 253,1 25778031203 43040 /var/log/hbase/gc.log-201812251535 (deleted)
java 20302 5988 hbase 3w REG 253,1 25778031203 43040 /var/log/hbase/gc.log-201812251535 (deleted)
java 20302 12680 hbase 3w REG 253,1 25778031203 43040 /var/log/hbase/gc.log-201812251535 (deleted)
java 20302 15047 hbase 3w REG 253,1 25778031203 43040 /var/log/hbase/gc.log-201812251535 (deleted)
java 20302 16379 hbase 3w REG 253,1 25778031203 43040 /var/log/hbase/gc.log-201812251535 (deleted)
java 20302 16380 hbase 3w REG 253,1 25778031203 43040 /var/log/hbase/gc.log-201812251535 (deleted)
清空已经删除但未释放的大文件
如果要让大文件彻底删除,通常需要重启打开文件的进程,但是有时在线服务不方便重启,影响服务的可用性。
这个时候可以通过 /proc/${pid}/fd 信息找到打开这个文件的系统 fd,然后通过 fd 来清空文件
代码语言:javascript复制# ll /proc/20302/fd/ |grep 201812251535
l-wx------ 1 hbase hadoop 64 Oct 18 21:02 3 -> /var/log/hbase/gc.log-201812251535 (deleted)
# 清空文件
# echo > /proc/20302/fd/3