首页 > 代码库 > 一个NFS缓存管理包的bug导致文件系统满的问题和解决方法

一个NFS缓存管理包的bug导致文件系统满的问题和解决方法

这几天安装CentOS 6的虚拟机总是提示文件系统满,一开始以为是最近oracle经常操作大数据量提交导致undo tbs无限扩大,后来发现原来是NFS缓存管理包cachefilesd的问题。分享一下:

由于是测试虚拟机,文件系统懒得专门规划,只划分了一个根目录分区。(各位admin切记不要犯这种实际生产环境的大忌):

[root@* /]df -h
Filesystem            Size  Used Avail Use% Mounted on
/dev/mapper/vg_*-lv_root
                       54G   54G  0G  100% /
tmpfs                 3.9G  604M  3.3G  16% /dev/shm
/dev/sda1             485M   32M  428M   7% /boot
/dev/mapper/vg_*-lv_home
                      5.5G  478M  4.8G   9% /home


查找大于1g的文件,看有没有什么文件可以先删除:

[root@* /]find -size +1G
./var/log/messages
./var/log/messages-20170109
------output omitted------

/var/log/messages和带日期后缀的日志有问题,怎么会这么大?取文件后100行看看:

[root@* log]tail -100 messages
Jan 16 16:29:42 * cachefilesd[1226]: Scan complete
Jan 16 16:29:42 * cachefilesd[1226]: Scan complete
Jan 16 16:29:42 * cachefilesd[1226]: Scan complete
------output omitted-------


cachefilesd scan complete是什么鬼?找大侠问度娘:

http://blog.itpub.net/17203031/viewspace-1130002/


Cachefilesd进程是负责进行网络文件系统的文件和目录缓存管理的,比如AFSNFS这类网络文件系统,需要在本地系统中存在一个Cache对象。这个问题是由于cachefilesd服务自身的bug造成的,由于内部设置了错误的日志级别(log level)。所以每次cachefilesd在工作进行Scan的时候,都会写入到/var/log/messages日志文件里面。”


详细信息请点击上述链接查阅。

明白了,反正是虚拟机,上面没跑NFS,内网升级太麻烦,索性关了吧:

[root@* log]service cachefilesd stop
[root@* log]chkconfig cachefilesd --level 35 off


最后,把非cachefilesd日志保存起来,清理源文件:

[root@* log]grep -v cachefilesd messages-20170109 > messages.bak
[root@* log]grep -v cachefilesd messages >> messages.bak
[root@* log]rm -f messages-20170109
[root@* log]echo > messages


最后再查看一下messages还有没有

cachefilesd[1226]: Scan complete

的日志,没有的话大功告成。


总结:1、业务文件系统必须和操作系统文件系统分离!2、定期检查并清理messages 。

本文出自 “苦瓜” 博客,请务必保留此出处http://golehuang.blog.51cto.com/7499/1892334

一个NFS缓存管理包的bug导致文件系统满的问题和解决方法