Apache/PHP无法下载大于2GB的文件。

Question

我正在使用一个PHP脚本来控制下载文件的访问。这对于小于2GB的文件可以正常工作，但对于较大的文件则会失败。

• Apache和PHP都是64位的
• 如果直接访问，Apache将允许下载文件（我不能允许这样做）

PHP代码核心部分（忽略访问控制）：

if (ob_get_level())  ob_end_clean();

error_log('FILETEST: '.$path.' : '.filesize($path));
header('Content-Description: File Transfer');
header('Content-Type: application/octet-stream');
header('Content-Disposition: attachment; filename='.basename($path));
header('Expires: 0');
header('Cache-Control: must-revalidate');
header('Pragma: public');
header('Content-Length: ' . filesize($path));
readfile($path);
exit;

错误日志显示文件大小正常。

[Tue Apr 08 11:01:16 2014] [error] [client *.*.*.*] FILETEST: /downloads/file.name : 2251373807, referer: http://myurl/files/

但是访问日志大小为负：

 *.*.*.* - - [08/Apr/2014:11:01:16 +0100] "GET /files/file.name HTTP/1.1" 200 -2043593489 "http://myurl/files/" "Mozilla/5.0 (Windows NT 6.1; WOW64; rv:24.0) Gecko/20100101 Firefox/24.0"

浏览器拒绝下载文件。实际上，使用wget时，也没有发送任何东西：

$ wget -S -O - http://myurl/files/file.name
--2014-04-08 11:33:38--  http://myurl/files/file.name
HTTP request sent, awaiting response... No data received.
Retrying.

- Rick

---

这通常是由于大量内存消耗，使用fread来维护大流而不是一次性处理2GB所导致的。 - Jason OOO

这是在你的托管上还是在你的家用电脑上？底层文件系统和操作系统是什么？ - dkasipovic

我真的会尝试Jason的建议。想象一下，8个人同时请求2GB = 16GB内存..使用fread（和带有b标志的fopen）还可以让您控制下载的最大速度。 - Daniel W.

谢谢大家，我选择了fread的方式，现在它完美地工作了。 - Rick

Answer 1

尝试将文件分块读取，并将其暴露给浏览器，而不是一次性填满本地内存并全部刷新。

用以下代码替换readfile($path);：

@ob_end_flush();
flush();

$fileDescriptor = fopen($file, 'rb');

while ($chunk = fread($fileDescriptor, 8192)) {
    echo $chunk;
    @ob_end_flush();
    flush();
}

fclose($fileDescriptor);
exit;

8192字节在某些情况下是一个关键点，请参考php.net/fread。

添加一些微秒变量（并与文件描述符的指针位置进行比较）还可以让您控制下载的最大速度。

*刷新输出缓冲区也略微取决于Web服务器，请使用这些命令以确保它至少尝试尽可能多地刷新。

- Daniel W.

---

使用这种方法进行下载的初始启动比使用readfile快得多。我曾经为此苦苦挣扎：我欠你一杯啤酒...！ - BSUK

Answer 2

我之前遇到过这个问题，使用下面的脚本下载文件，将大文件分成块来下载，而不是一次性尝试获取整个文件。该脚本还考虑了浏览器的使用情况，因为某些浏览器（主要是IE）可能会稍微不同地处理头部信息。

private function outputFile($file, $name, $mime_type='') {
    $fileChunkSize = 1024*30;

    if(!is_readable($file)) die('File not found or inaccessible!');

    $size = filesize($file);
    $name = rawurldecode($name);

    $known_mime_types=array(
        "pdf" => "application/pdf",
        "txt" => "text/plain",
        "html" => "text/html",
        "htm" => "text/html",
        "exe" => "application/octet-stream",
        "zip" => "application/zip",
        "doc" => "application/msword",
        "xls" => "application/vnd.ms-excel",
        "ppt" => "application/vnd.ms-powerpoint",
        "gif" => "image/gif",
        "png" => "image/png",
        "jpeg"=> "image/jpg",
        "jpg" =>  "image/jpg",
        "php" => "text/plain"
     );

     if($mime_type=='')
     {
         $file_extension = strtolower(substr(strrchr($file,"."),1));
         if(array_key_exists($file_extension, $known_mime_types))
            $mime_type=$known_mime_types[$file_extension];
         else
            $mime_type="application/force-download";
     }

     @ob_end_clean();

     if(ini_get('zlib.output_compression'))
      ini_set('zlib.output_compression', 'Off');

     header('Content-Type: ' . $mime_type);
     header('Content-Disposition: attachment; filename="'.$name.'"');
     header("Content-Transfer-Encoding: binary");
     header('Accept-Ranges: bytes');
     header("Cache-control: private");
     header('Pragma: private');
     header("Expires: Mon, 26 Jul 1997 05:00:00 GMT");

     if(isset($_SERVER['HTTP_RANGE']))
     {
        list($a, $range) = explode("=",$_SERVER['HTTP_RANGE'],2);
        list($range) = explode(",",$range,2);
        list($range, $range_end) = explode("-", $range);
        $range=intval($range);
        if(!$range_end)
            $range_end=$size-1;
        else
            $range_end=intval($range_end);

        $new_length = $range_end-$range+1;
        header("HTTP/1.1 206 Partial Content");
        header("Content-Length: $new_length");
        header("Content-Range: bytes $range-$range_end/$size");
     } 
     else 
     {
        $new_length=$size;
        header("Content-Length: ".$size);
     }

     $chunksize = 1*($fileChunkSize);
     $bytes_send = 0;
     if ($file = fopen($file, 'r'))
     {
        if(isset($_SERVER['HTTP_RANGE']))
        fseek($file, $range);

        while(!feof($file) && 
            (!connection_aborted()) && 
            ($bytes_send<$new_length)
        )
        {
            $buffer = fread($file, $chunksize);
            print($buffer);
            flush();
            $bytes_send += strlen($buffer);
        }
     fclose($file);
     } 
     else die('Error - can not open file.');

    die();
}

- llanato

Answer 3

在readfile($path);之前添加代码；

ob_clean();
flush();

我使用这段代码进行下载：

if (file_exists($file)) {


        header('Content-Description: File Transfer');
        header('Content-Type: application/octet-stream');
        header('Content-Disposition: attachment; filename='.basename($file));
        header('Content-Transfer-Encoding: binary');
        header('Expires: 0');
        header('Cache-Control: must-revalidate, post-check=0, pre-check=0');
        header('Pragma: public');
        header('Content-Length: ' . filesize($file));

        ob_clean();
        flush();
        readfile($file);
        exit;

    }

- Knase

Answer 4

你最好的选择是使用类似这样的函数强制 Apache 进入 HTTP 分块模式。这样做可以节省大量 PHP 内存。

function readfile_chunked($filename, $retbytes = TRUE) {
  $CHUNK_SIZE=1024*1024;
  $buffer = '';
  $cnt =0;
  $handle = fopen($filename, 'rb');
  if ($handle === false) {
    return false;
  }
  while (!feof($handle)) {
    $buffer = fread($handle, $CHUNK_SIZE);
    echo $buffer;
    @ob_flush();
    flush();
    if ($retbytes) {
      $cnt += strlen($buffer);
    }
  }
  $status = fclose($handle);
  if ($retbytes && $status) {
    return $cnt; // return num. bytes delivered like readfile() does.
  }
  return $status;
}

- Ghigo