2017-03-21 46 views
9

我试图在websever上实时处理用户上传的文件, ,但似乎只有在完成文件上传后,APACHE才会调用PHP。在Web服务器上上传文件而无需先在本地存储?

当我上传使用curl的文件,并设置

传输编码:“分块”

我取得了一些成功,但通过浏览器不能做同样的事情。

  • 我用Dropzone.js但是当我试图设置相同的标题,它表示传输-Encoding是不安全的报头,因此不设置它。

这个答案解释了那里有什么问题。 Can't set Transfer-Encoding :"Chunked from Browser"

简而言之问题是,当用户将文件上传到网络服务器,我想网络服务器来启动,只要第一个字节是可用的处理它。 通过过程我的意思是,管道它到一个命名管道。

不想让500MB先上传到服务器,然后开始处理它。

但是对于当前的Web服务器(APACHE-PHP),我似乎无法完成它。

有人可以请解释一下,使用什么技术堆栈或变通方法,以便我可以通过浏览器上传大文件,并在第一个字节可用时立即开始处理它。

+0

如果您有兴趣我可以发布答案 – bxN5

+0

您可以使用fineuploader以5 MB大块上传到Amazon AWS并启动一个cron来检查新的AWS文件并为Named Pipe处理它吗? –

+0

@ bxN5:是的请发布,目前我正在努力做同样的busboy图书馆,'数据'功能我管道大块儿童过程..! – Himanshu97

回答

2

它是可以使用的NodeJS /多方做到这一点。 Here他们有一个直接上传到Amazon S3的例子。This是表单,它将内容类型设置为multipart/form-data。而here是表单零件处理的功能。 part参数的类型为ReadableStream,这将允许使用data事件对输入进行每块处理。

节点js中可读流的更多信息是here

1

如果你真的想这么做(抱歉,不要认为这是个好主意),你应该尝试寻找一个可以完成你的工作的FUSE文件系统。

也许已经有一个https://github.com/libfuse/libfuse/wiki/Filesystems

或者你应该写你自己的。

但是一旦上传完成记忆和后处理脚本完成他的工作临时文件将被删除

+0

我很害怕,这不是我正在寻找的。 我只想将上传的文件流式传输到外部应用程序,而不是先存储它。 – Himanshu97

1

你的意思是你想用PHP生活流?

<?php 

class VideoStream 
{ 
    private $path = ""; 
    private $stream = ""; 
    private $buffer = 102400; 
    private $start = -1; 
    private $end = -1; 
    private $size = 0; 

    function __construct($filePath) 
    { 
     $this->path = $filePath; 
    } 

    /** 
    * Open stream 
    */ 
    private function open() 
    { 
     if (!($this->stream = fopen($this->path, 'rb'))) { 
      die('Could not open stream for reading'); 
     } 

    } 

    /** 
    * Set proper header to serve the video content 
    */ 
    private function setHeader() 
    { 
     ob_get_clean(); 
     header("Content-Type: video/mp4"); 
     header("Cache-Control: max-age=2592000, public"); 
     header("Expires: ".gmdate('D, d M Y H:i:s', time()+2592000) . ' GMT'); 
     header("Last-Modified: ".gmdate('D, d M Y H:i:s', @filemtime($this->path)) . ' GMT'); 
     $this->start = 0; 
     $this->size = filesize($this->path); 
     $this->end = $this->size - 1; 
     header("Accept-Ranges: 0-".$this->end); 

     if (isset($_SERVER['HTTP_RANGE'])) { 

      $c_start = $this->start; 
      $c_end = $this->end; 

      list(, $range) = explode('=', $_SERVER['HTTP_RANGE'], 2); 
      if (strpos($range, ',') !== false) { 
       header('HTTP/1.1 416 Requested Range Not Satisfiable'); 
       header("Content-Range: bytes $this->start-$this->end/$this->size"); 
       exit; 
      } 
      if ($range == '-') { 
       $c_start = $this->size - substr($range, 1); 
      }else{ 
       $range = explode('-', $range); 
       $c_start = $range[0]; 

       $c_end = (isset($range[1]) && is_numeric($range[1])) ? $range[1] : $c_end; 
      } 
      $c_end = ($c_end > $this->end) ? $this->end : $c_end; 
      if ($c_start > $c_end || $c_start > $this->size - 1 || $c_end >= $this->size) { 
       header('HTTP/1.1 416 Requested Range Not Satisfiable'); 
       header("Content-Range: bytes $this->start-$this->end/$this->size"); 
       exit; 
      } 
      $this->start = $c_start; 
      $this->end = $c_end; 
      $length = $this->end - $this->start + 1; 
      fseek($this->stream, $this->start); 
      header('HTTP/1.1 206 Partial Content'); 
      header("Content-Length: ".$length); 
      header("Content-Range: bytes $this->start-$this->end/".$this->size); 
     } 
     else 
     { 
      header("Content-Length: ".$this->size); 
     } 

    } 

    /** 
    * close curretly opened stream 
    */ 
    private function end() 
    { 
     fclose($this->stream); 
     exit; 
    } 

    /** 
    * perform the streaming of calculated range 
    */ 
    private function stream() 
    { 
     $i = $this->start; 
     set_time_limit(0); 
     while(!feof($this->stream) && $i <= $this->end) { 
      $bytesToRead = $this->buffer; 
      if(($i+$bytesToRead) > $this->end) { 
       $bytesToRead = $this->end - $i + 1; 
      } 
      $data = fread($this->stream, $bytesToRead); 
      echo $data; 
      flush(); 
      $i += $bytesToRead; 
     } 
    } 

    /** 
    * Start streaming video content 
    */ 
    function start() 
    { 
     $this->open(); 
     $this->setHeader(); 
     $this->stream(); 
     $this->end(); 
    } 
} 

要使用这个类,你将不得不写简单的代码类似如下:

$stream = new VideoStream($filePath); 
$stream->start(); 
+1

我认为他正在研究一些更好的实时工作空间。 – DeerSpotter

1

你可以上传与HTML5的继续上传工具(如Resumable.js)和处理上传的部分作为文件他们收到了。

或者作为一种解决方法,您可以找到上传文件的路径(通常位于/ tmp),然后编写后台作业以将其流式传输到第三方应用程序。这可能会更困难。

可能还有其他的解决方案......

相关问题