Rozpakowywanie dużych plików za pomocą gzip w PHP

Question

Używam prostej funkcji rozpakowywania (jak widać poniżej) dla moich plików, więc nie muszę rozpakowywać plików ręcznie, zanim zostaną one przetworzone dalej.

function uncompress($srcName, $dstName) { 
    $string = implode("", gzfile($srcName)); 
    $fp = fopen($dstName, "w"); 
    fwrite($fp, $string, strlen($string)); 
    fclose($fp); 
} 

Problem polega na tym, że jeśli plik gzip jest duży (na przykład 50 MB), rozpakowanie zajmuje dużą ilość pamięci RAM do przetworzenia.

Pytanie: czy można przeanalizować spakowany plik gzip w kawałki i nadal uzyskać prawidłowy wynik? Czy istnieje lepszy inny sposób radzenia sobie z problemem wyodrębniania dużych plików gzip (nawet jeśli potrwa to kilka sekund)?

Answer 1

gzfile() to wygodna metoda, która wywołuje gzopen, gzread i gzclose.

Tak, możesz ręcznie zrobić gzopen i gzread plik w porcjach.

Będzie to rozpakować plik w kawałki 4KB:

function uncompress($srcName, $dstName) { 
    $sfp = gzopen($srcName, "rb"); 
    $fp = fopen($dstName, "w"); 

    while (!gzeof($sfp)) { 
     $string = gzread($sfp, 4096); 
     fwrite($fp, $string, strlen($string)); 
    } 
    gzclose($sfp); 
    fclose($fp); 
} 

Answer 2

spróbuj

function uncompress($srcName, $dstName) { 
    $fp = fopen($dstName, "w"); 
    fwrite($fp, implode("", gzfile($srcName))); 
    fclose($fp); 
} 

$ długość parametr jest opcjonalny.

Answer 3

Jeśli jesteś na Linuksie, posiadają wymagane privilegies wykonywać polecenia, a zainstalowany jest komenda gzip, można spróbować nazywając ją z czymś shell_exec

coś trochę jak to, jak sądzę, byłoby do:

shell_exec('gzip -d your_file.gz'); 

W ten sposób plik nie zostanie rozpakowany przez PHP.

Jak sidenote:

• Uważaj gdzie polecenie jest uruchamiane z (ot użyć Swith powiedzieć „rozpakować do że katalog”)
• Czasami warto spojrzeć pod numerem escapeshellarg ;-)

Answer 4

Jak maliayas wspomniano, może to prowadzić do błędów. Doświadczyłem nieoczekiwanego upadku pętli while, ale plik gz został pomyślnie zdekompresowany. Cały kod wygląda tak i działa lepiej dla mnie:

function gzDecompressFile($srcName, $dstName) { 
    $error = false; 

    if($file = gzopen($srcName, 'rb')) { // open gz file 

     $out_file = fopen($dstName, 'wb'); // open destination file 

     while (($string = gzread($file, 4096)) != '') { // read 4kb at a time 
      if(!fwrite($out_file, $string)) { // check if writing was successful 
       $error = true; 
      } 
     } 

     // close files 
     fclose($out_file); 
     gzclose($file);  

    } else { 
     $error = true; 
    } 

    if ($error) 
     return false; 
    else 
     return true; 
}