在我们的Ubuntu Linux机器上运行python Twisted应用程序时,我们遇到了可怕的“太多打开文件”的问题.在我们程序的许多地方,我们使用子进程Popen,如下所示:
Popen('ifconfig ' + iface, shell=True, stdin=PIPE, stdout=PIPE, stderr=STDOUT, close_fds=True)
output = process.stdout.read()
而在其他地方我们使用子进程通信:
process = subprocess.Popen(['/usr/bin/env', 'python', self._get_script_path(script_name)],
stdin=subprocess.PIPE,
stdout=subprocess.PIPE,
close_fds=True)
out, err = process.communicate(data)
在两种情况下,为了关闭任何打开的文件描述符,我到底需要做什么? Python文档对此不太清楚.从我收集的内容(这可能是错的),communic()和wait()确实会自己清理任何开放的fds.但是Popen怎么样?如果我不打电话通信或等待,我是否需要在致电Popen后明确关闭stdin,stdout和stderr?
解决方法:
根据to this source for the subprocess module (link),如果你打电话沟通,你不应该关闭stdout和stderr管道.
否则我会尝试:
process.stdout.close()
process.stderr.close()
完成使用过程对象后.
例如,当您直接调用.read()时:
output = process.stdout.read()
process.stdout.close()
在上面的模块源中查看如何定义的communication(),你会看到它在读取后关闭每个管道,这也是你应该做的.