saltstcak有个坑keep_jobs必须要定期清理

saltstack在运行的时候会在salt下面会产生无数的job的cache，必须要定期删除，或者是把keep_jobs的时间给写出来，不写的花就好像我一样的悲剧了，他会把整个服务器的inode给占满了，导致服务器没法正常工作了。

<code>grep </code><code>"keep_jobs"</code> <code>/etc/salt/master</code>

<code>#keep_jobs: </code><code>24</code>

把这个给打开，不然日积月累，有没有定期删除job，就会导致硬盘的inode满了，无法工作了

看下我的案例

产生没有释放句柄的原因： 第一线程打开文件。另一个线程将该文件删除。就会出现给问题。将整儿进程kill掉才能释放全部句柄。

我的根目录的inode节点满了，没办法只有自己来看看,重启也没用.

<code>[root@master ~]</code><code># df -i</code>

<code>Filesystem      Inodes   IUsed  IFree IUse% Mounted on</code>

<code>/dev/sda3</code>      <code>1240320 1240320      0  100% /</code>

<code>tmpfs           126536       2 126534    1% </code><code>/dev/shm</code>

<code>/dev/sda1</code>        <code>25688      38  25650    1% </code><code>/boot</code>

<code>.host:/              0       0      0     - </code><code>/mnt/hgfs</code>

<code>句柄数即文件数,而能产生大量句柄的就是var目录下,于是写了个</code><code>for</code><code>循环开始查找.</code>

<code>for</code> <code>i </code><code>in</code> <code>`</code><code>ls</code> <code>/var</code><code>`;</code><code>do</code> <code>find</code> <code>$i/ -</code><code>type</code> <code>f|</code><code>wc</code> <code>-l &amp;&amp;</code><code>echo</code> <code>$i ;</code><code>done</code>

<code>1</code>

<code>account</code>

<code>find</code><code>: “cache</code><code>/salt/master/jobs/7c/3238b58e45f242132dade0d989314a/</code><code>.minions.p”: 没有那个文件或目录</code>

<code>find</code><code>: “cache</code><code>/salt/master/jobs/7c/3238b58e45f242132dade0d989314a/</code><code>.load.p”: 没有那个文件或目录</code>

<code>find</code><code>: “cache</code><code>/salt/master/jobs/7c/3238b58e45f242132dade0d989314a/jid</code><code>”: 没有那个文件或目录</code>

<code>find</code><code>: “cache</code><code>/salt/master/jobs/7c/f98bd5f094921b93d5435ea81b0414/</code><code>.minions.p”: 没有那个文件或目录</code>

<code>find</code><code>: “cache</code><code>/salt/master/jobs/7c/f98bd5f094921b93d5435ea81b0414/</code><code>.load.p”: 没有那个文件或目录</code>

<code>find</code><code>: “cache</code><code>/salt/master/jobs/7c/f98bd5f094921b93d5435ea81b0414/jid</code><code>”: 没有那个文件或目录</code>

<code>find</code><code>: “cache</code><code>/salt/master/jobs/7c/afa7d7cf12cedd5e2f121536749ded/</code><code>.minions.p”: 没有那个文件或目录</code>

<code>find</code><code>: “cache</code><code>/salt/master/jobs/7c/afa7d7cf12cedd5e2f121536749ded/</code><code>.load.p”: 没有那个文件或目录</code>

<code>find</code><code>: “cache</code><code>/salt/master/jobs/7c/afa7d7cf12cedd5e2f121536749ded/jid</code><code>”: 没有那个文件或目录</code>

<code>find</code><code>: “cache</code><code>/salt/master/jobs/7c/2f0ced419e95aff3fd0940303ed101/master/return</code><code>.p”: 没有那个文件或目录</code>

<code>find</code><code>: “cache</code><code>/salt/master/jobs/7c/2f0ced419e95aff3fd0940303ed101/master/out</code><code>.p”: 没有那个文件或目录</code>

<code>find</code><code>: “cache</code><code>/salt/master/jobs/7c/2f0ced419e95aff3fd0940303ed101/</code><code>.minions.p”: 没有那个文件或目录</code>

<code>find</code><code>: “cache</code><code>/salt/master/jobs/7c/2f0ced419e95aff3fd0940303ed101/</code><code>.load.p”: 没有那个文件或目录</code>

<code>find</code><code>: “cache</code><code>/salt/master/jobs/7c/2f0ced419e95aff3fd0940303ed101/jid</code><code>”: 没有那个文件或目录</code>

<code>find</code><code>: “cache</code><code>/salt/master/jobs/7c/c8ad7fa07b55ceaf9dd4f1fa068ee4/</code><code>.minions.p”: 没有那个文件或目录</code>

<code>find</code><code>: “cache</code><code>/salt/master/jobs/7c/c8ad7fa07b55ceaf9dd4f1fa068ee4/</code><code>.load.p”: 没有那个文件或目录</code>

<code>find</code><code>: “cache</code><code>/salt/master/jobs/7c/c8ad7fa07b55ceaf9dd4f1fa068ee4/jid</code><code>”: 没有那个文件或目录</code>

找到了删除即可完成.

本文转自  Forande  51CTO博客，原文链接:http://blog.51cto.com/853056088/1936594