处理文件输入/从蟒蛇

Question

外部二进制输出从我的Python脚本我需要调用因此两个外部二进制文件，以处理文件中的两个步骤：

import os, subprocess 
sbp = subprocess.Popen(['program_1', '-i', 'input.file', '-o', 'temp.file']) 
sbp = subprocess.Popen(['program_2', '-i', 'temp.file', '-o', 'output.file'])      
os.remove('temp.file') 

不过，这将是不错的速度 - 通过使用基于虚拟RAM的文件而不是基于“物理”磁盘的管道来减少磁盘使用量。我知道我可以使用StringIO或tempfile.SpooledTemporaryFile()来处理Python脚本中的虚拟文件，但有没有可能将链接传递给这样的文件到外部二进制文件？

Answer 1

from subprocess import Popen 
from tempfile import NamedTemporaryFile 

tmp = NamedTemporaryFile('w+') 
sbp = Popen(['program_1', '-i', 'input.file', '-o', tmp.name]) 
sbp = Popen(['program_2', '-i', tmp.name, '-o', 'output.file'])      
tmp.close() 

最后tmp将被删除。

Answer 2

假设你可以告诉你2个程序读取，并从标准输入和stdout写入/，你可以管从一个子命令其他：

import os, subprocess 
sp1 = subprocess.Popen(['program_1', '-i', 'input.file'], stdout=subprocess.PIPE) 
sp2 = subprocess.Popen(['program_2', '-o', 'output.file'], stdin=sp1.stdout) 
sp1.stdout.close() 
sp2.communicate() 

见https://docs.python.org/2/library/subprocess.html#replacing-shell-pipeline。

另一个选项（UNIX）是使用命名管道（在操作系统级别创建的，例如mkfifo /tmp/mypipe）：

import os, subprocess 
os.mkfifo('/tmp/mypipe') 
sp1 = subprocess.Popen(['program_1', '-i', 'input.file', '-o', '/tmp/mypipe']) 
sp2 = subprocess.Popen(['program_2', '-i', '/tmp/mypipe', '-o', 'output.file']) 

而且它也应该可以使用os.pipe()。