python – 在子进程Popen和通信之后关闭所有文件的正确方法

在我们的Ubuntu Linux机器上运行python Twisted应用程序时,我们遇到了可怕的“太多打开文件”的问题.在我们程序的许多地方,我们使用子进程Popen,如下所示：Popen(ifconfig + iface, shell=True, stdin=PIPE, stdo...

在我们的Ubuntu Linux机器上运行python Twisted应用程序时,我们遇到了可怕的“太多打开文件”的问题.在我们程序的许多地方,我们使用子进程Popen,如下所示：

Popen('ifconfig ' + iface, shell=True, stdin=PIPE, stdout=PIPE, stderr=STDOUT, close_fds=True)
output = process.stdout.read()

而在其他地方我们使用子进程通信：

process = subprocess.Popen(['/usr/bin/env', 'python', self._get_script_path(script_name)],
                       stdin=subprocess.PIPE,
                       stdout=subprocess.PIPE,
                       close_fds=True)
out, err = process.communicate(data)

在两种情况下,为了关闭任何打开的文件描述符,我到底需要做什么？ Python文档对此不太清楚.从我收集的内容(这可能是错的),communic()和wait()确实会自己清理任何开放的fds.但是Popen怎么样？如果我不打电话通信或等待,我是否需要在致电Popen后明确关闭stdin,stdout和stderr？

解决方法:

根据to this source for the subprocess module (link),如果你打电话沟通,你不应该关闭stdout和stderr管道.

否则我会尝试：

process.stdout.close()
process.stderr.close()

完成使用过程对象后.

例如,当您直接调用.read()时：

output = process.stdout.read()
process.stdout.close()

在上面的模块源中查看如何定义的communication(),你会看到它在读取后关闭每个管道,这也是你应该做的.