在tgz文件上运行python subprocess.call来解压和流输出

Question

我正在使用子进程调用在命令行中解压文件，我需要使用该调用的输出流入临时文件，以便我可以用tgz文件读取“+ CONTENTS”文件夹的内容。

我的失败输出是：

./streamContents.py RSH：FTP：没有与主机名 焦油（孩子）相关地址：ftp://myftpserver.com/pkgsrc/doxygen_pkgs/test。 TGZ：无法打开：输入/输出错误 焦油（子）：错误是不可恢复的：现在退出

的gzip：标准输入：返回儿童状况2 焦油：文件 焦油意外结束错误退出之前的延迟错误 回溯（最近最后一次通话）： 文件 “./streamContents.py”，第29行，在 流= proc.stdout.read（8196） AttributeError的： '诠释' 对象有没有属性 '标准输出'

#!/usr/bin/python 

from io import BytesIO 
import urllib2 
import tarfile 
import ftplib 
import socket 
import threading 
import subprocess 

tarfile_url = "ftp://myftpserver.com/pkgsrc/doxygen_pkgs/test.tg 
z" 

try: 
    ftpstream = urllib2.urlopen(tarfile_url) 
except URLerror, e: 
    print "URL timeout" 
except socket.timeout: 
    print "Socket timeout" 


# BytesIO creates an in-memory temporary file. 
tmpfile = BytesIO() 
last_size = 0 
tfile_extract = "" 

while True: 
    proc = subprocess.call(['tar','-xzvf', tarfile_url], stdout=subprocess.PIPE) 
    # Download a piece of the file from the ftp connection 
    stream = proc.stdout.read(8196) 
    if not stream: break 
    tmpfile.write(bytes(stream)) 
    # Seeking back to the beginning of the temporary file. 
    tmpfile.seek(0) 
    # r|gz forbids seeking backward; r:gz allows seeking backward 
    try: 
     tfile = tarfile.open(fileobj=tmpfile, mode="r:gz") 
     print tfile.extractfile("+CONTENTS") 
     tfile_extract_text = tfile_extract.read() 
     print tfile_extract.tell() 
     tfile.close() 
     if tfile_extract.tell() > 0 and tfile_extract.tell() == last_size: 
      print tfile_extract_text 
      break 
     else: 
      last_size = tfile_extract.tell() 
    except Exception: 
     tfile.close() 
     pass 


tfile_extract_text = tfile_extract.read() 
print tfile_extract_text 

# When you're done: 
tfile.close() 
tmpfile.close() 

Answer 1

扩展我上面的评论，你需要做下来使用urllib2和tempfile将tar文件加载到临时文件，然后使用tarfile打开此临时文件。

下面是一些代码开始：

import urllib2 
import tarfile 
from tempfile import TemporaryFile 

f_url = 'url_of_your_tar_archive' 
ftpstream = urllib2.urlopen(f_url) 
tmpfile = TemporaryFile() 

# Download contents of tar to a temporary file 
while True: 
    s = ftpstream.read(16384) 
    if not s: 
     break 
    tmpfile.write(s) 
ftpstream.close() 

# Access the temporary file to extract the file you need 
tmpfile.seek(0) 
tfile = tarfile.open(fileobj=tmpfile, mode='r:gz') 
print tfile.getnames() 
contents = tfile.extractfile("+CONTENTS").read() 
print contents