检查 Linux 中给定进程的打开 FD 限制

Question

我最近有一个 Linux 进程“泄露”了文件描述符：它打开了文件描述符，但没有正确关闭其中一些文件描述符。

如果我对此进行监控，我就可以提前得知该过程已达到其极限。

有没有一种很好的 Bash 或 Python 方法来检查 Ubuntu Linux 系统中给定进程的 FD 使用率？

编辑：

我现在知道如何检查有多少个打开的文件描述符；我只需要知道一个进程允许有多少个文件描述符。某些系统（例如 Amazon EC2）没有 /proc/pid/limits 文件。

Answer 1

计算 /proc//fd/ 中的条目数。适用于进程的硬限制和软限制可以在 /proc//limits 中找到。

Answer 2

Linux 内核提供的获取资源限制的唯一接口是 getrlimit() 和 /proc/pid/limits。 getrlimit() 只能获取调用进程的资源限制。 /proc/pid/limits 允许您获取具有相同用户 ID 的任何进程的资源限制，并且在 RHEL 5.2 上可用， RHEL 4.7、Ubuntu 9.04 以及具有 2.6.24 或更高版本内核的任何发行版。

如果您需要支持较旧的 Linux 系统，那么您必须让进程本身调用 getrlimit()。当然，最简单的方法是修改程序或其使用的库。如果您正在运行该程序，则可以使用LD_PRELOAD将您自己的代码加载到该程序中。如果这些都不可能，那么您可以使用 gdb 附加到进程并让它在进程内执行调用。您也可以使用 ptrace() 自己执行相同的操作来附加到进程、将调用插入到其内存中等，但是这样做非常复杂，因此不建议这样做。

有了适当的权限，执行此操作的其他方法将涉及查看内核内存、加载内核模块或以其他方式修改内核，但我假设这些都是不可能的。

Answer 3

查看使用进程的前 20 个文件句柄：

for x in `ps -eF| awk '{ print $2 }'`;do echo `ls /proc/$x/fd 2> /dev/null | wc -l` $x `cat /proc/$x/cmdline 2> /dev/null`;done | sort -n -r | head -n 20

输出格式为文件句柄计数、pid、cmdline，用于进程

示例输出

701 1216 /sbin/rsyslogd-n-c5
169 11835 postgres: spaceuser spaceschema [local] idle
164 13621 postgres: spaceuser spaceschema [local] idle
161 13622 postgres: spaceuser spaceschema [local] idle
161 13618 postgres: spaceuser spaceschema [local] idle

Answer 4

您可以尝试编写脚本，定期在给定的 pid 上调用 lsof -p {PID} 。

Answer 5

您要求 bash/python 方法。 ulimit 将是最好的 bash 方法（无需手动修改 /proc/$pid/fd 等）。对于 python，您可以使用资源模块。

import resource

print(resource.getrlimit(resource.RLIMIT_NOFILE))

$ python test.py

(1024, 65536)

resource.getrlimit 对应于C 程序中的 getrlimit 调用。结果代表所请求资源的当前值和最大值。在上面的示例中，当前（软）限制为 1024。这些值是当今 Linux 系统上的典型默认值。

Answer 6

在 CentOS 6 及更低版本（任何使用 GCC 3 的系统）中，您可能会发现调整内核限制并不能解决问题。这是因为在编译时设置了一个 FD_SETSIZE 值海湾合作委员会正在使用。为此，您需要增加该值，然后重新编译该过程。

此外，您可能会发现由于 libpthread 中的已知问题 如果您正在使用该库。此调用已集成到 GCC 4 / CentOS7 / RHEL 7 中的 GCC 中，这似乎解决了线程问题。

Answer 7

使用优秀的 psutil 包的 Python 包装器：

import psutil

for p in psutil.process_iter(attrs=['pid', 'name', 'username', 'num_fds']):
    try:
        soft, hard = p.rlimit(psutil.RLIMIT_NOFILE)
        cur = p.info['num_fds']
        usage = int(cur / soft * 100)
        print('{:>2d}% {}/{}/{}'.format(
            usage,
            p.info['pid'],
            p.info['username'],
            p.info['name'],
            ))
    except psutil.NoSuchProcess:
        pass