inode 耗尽处理

1.昨天晚上收到zabbix 报警，磁盘 / 空间已满。

2.登陆上去查看磁盘空间：

# df -h

Filesystem            Size  Used Avail Use% Mounted on

/dev/vda1              20G  7.5G   15G  50% /

tmpfs                 3.9G   16K  3.9G   1% /dev/shm

/dev/vdb              148G  3.8G  137G   3% /data

由此可见，磁盘空间正常。

3.查看inode 使用情况

查看inode ：

# df -i

Filesystem            Inodes   IUsed   IFree IUse% Mounted on

/dev/vda3            2289280    2289280 5    100% /

tmpfs                  62805       1   62804    1% /dev/shm

/dev/vda1              51200      44   51156    1% /boot

/dev/vdb4            1966080    1327 1964753    1% /data

/ 的inode 已经爆满

4.查看那个分区占用最多

du --max-depth=1 /

...

var 最多

继续查看：

du --max-depth=1 var/

....

spool 最多

继续查看：

du --max-depth=1 spool/

....

clientmqueue 最多

5.查看数量：

ls clientmqueue | wc -l

1248921

哇，竟然有这么多。

6./var/spool/clientmqueue目录文件的由来：

如果系统中有用户开启了cron，而cron中执行的程序有输出内容，输出内容会以邮件形式发给cron的用户，而sendmail没有启动所以就产生了这些文件。

cron输出从定向：

很简单，在cron的自动执行语句后加上> /dev/null 2>&1

7./var/spool/clientmqueue 文件太多 rm -f * 删除会报错，无法删除。使用另外一种删除方法

8.建立空文件夹:

#mkidr /data/haha

# rsync --delete-before -a -H -v --progress --stats haha/ /var/spool/clientmqueue/

.....

deleting dfr787X1dF022679

deleting dfr787W1rw022630

deleting dfr787W1dY022629

deleting dfr787V1Fm022571

.....

rsync 海量删除文件

9.删除完毕，查看：

# df -i

Filesystem            Inodes   IUsed   IFree IUse% Mounted on

/dev/vda3            2289280   63766 2225514    3% /

tmpfs                  62805       1   62804    1% /dev/shm

/dev/vda1              51200      44   51156    1% /boot

/dev/vdb4            1966080    1331 1964749    1% /data

已经恢复。