Zmniejszenie zużycia pamięci w PHP podczas obsługi wysyłania przez wejście php

Question

Mam uruchamianie nginx 1.0.5 + php-cgi (PHP 5.3.6). Muszę przesłać ~ 1 GB plików (musi być 1-5 równoległych uploadów). Próbuję utworzyć przesyłanie dużych plików poprzez upload ajax. Wszystko działa, ale PHP je dużo pamięci dla każdego przesłania. Ustawiłem memory_limit = 200M, ale działa do ~ 150 MB wielkości przesłanego pliku. Jeśli plik jest większy - przesyłanie nie powiedzie się. Mogę ustawić memory_limit na większy i większy, ale myślę, że to niewłaściwy sposób, ponieważ PHP może zjeść całą pamięć. Używam tego kodu PHP (nie jest to uproszczona), aby obsłużyć przesłane po stronie serwera:

$input = fopen('php://input', 'rb'); 
$file = fopen('/tmp/' . $_GET['file'] . microtime(), 'wb'); 
while (!feof($input)) { 
    fwrite($file, fread($input, 102400)); 
} 
fclose($input); 
fclose($file); 

/etc/nginx/nginx.conf:

user www-data; 
worker_processes 100; 
pid /var/run/nginx.pid; 

events { 
     worker_connections 768; 
     # multi_accept on; 
} 

http { 

     ## 
     # Basic Settings 
     ## 

     sendfile on; 
     tcp_nopush on; 
     tcp_nodelay on; 
     keepalive_timeout 65; 
     types_hash_max_size 2048; 
     client_max_body_size 2g; 
     # server_tokens off; 
     server_names_hash_max_size 2048; 
     server_names_hash_bucket_size 128; 

     # server_names_hash_bucket_size 64; 
     # server_name_in_redirect off; 

     include /etc/nginx/mime.types; 
     default_type application/octet-stream; 

     ## 
     # Logging Settings 
     ## 

     access_log /var/log/nginx/access.log; 
     error_log /var/log/nginx/error.log; 

     ## 
     # Gzip Settings 
     ## 

     gzip on; 
     gzip_disable "msie6"; 

     include /etc/nginx/conf.d/*.conf; 
     include /etc/nginx/sites-enabled/*; 
} 

/etc/nginx/strony obsługującej/SRV .conf:

server { 
    listen 80; 
    server_name srv.project.loc; 

    # Define root 
    set $fs_webroot "/home/andser/public_html/project/srv"; 
    root $fs_webroot; 
    index index.php; 

    # robots.txt 
    location = /robots.txt { 
     alias $fs_webroot/deny.robots.txt; 
    } 

    # Domain root 
    location/{ 
     if ($request_method = OPTIONS) { 
      add_header Access-Control-Allow-Origin "http://project.loc"; 
      add_header Access-Control-Allow-Methods "GET, OPTIONS, POST"; 
      add_header Access-Control-Allow-Headers "Authorization,X-Requested-With,X-File-Name,Content-Type"; 
      #add_header Access-Control-Allow-Headers "*"; 
      add_header Access-Control-Allow-Credentials "true"; 
      add_header Access-Control-Max-Age "10000"; 
      add_header Content-Length 0; 
      add_header Content-Type text/plain; 
      return 200; 
     } 
     try_files $uri $uri/ /index.php?$query_string; 
    } 

    #error_page 404 /404.htm 

    location ~ index.php { 
     fastcgi_pass 127.0.0.1:9000; 
     fastcgi_index index.php; 
     fastcgi_param SCRIPT_FILENAME $fs_webroot/$fastcgi_script_name; 
     include fastcgi_params; 
     fastcgi_param REQUEST_METHOD $request_method; 
     fastcgi_param PATH_INFO $fastcgi_script_name; 

     add_header Pragma no-cache; 
     add_header Cache-Control no-cache,must-revalidate; 
     add_header Access-Control-Allow-Origin *; 
     #add_header Access-Control-Allow-Headers "Content-Type, X-Requested-With, X-File-Name"; 
    } 
} 

Ktoś wie, jak zmniejszyć zużycie pamięci przez PHP? Dzięki.

Answer 1

Byłem w tym samym bucie przedtem i to jest to, co podzieliłem pliki na różne części podczas procesu wysyłania.

ja Dobrym przykładem jest użycie [1]: http://www.plupload.com/index.php „pulpload” lub próbuje za pomocą apletu Java http://jupload.sourceforge.net który ma również możliwość wznowienia gdy istnieją problemy sieciowe itp

Najważniejszą rzeczą jest to, że chcesz, aby pliki załadowane przez przeglądarkę internetową, zauważamy, że powstrzymujemy cię od tego w kawałkach:

Answer 2

Istnieje hack, który dotyczy fałszowania nagłówka treści, zmieniając go z application/octet-stream na multipart/form-data. Zatrzyma PHP od zapełniania $ HTTP_RAW_POST_DATA. Więcej szczegółów https://github.com/valums/file-uploader/issues/61.

Answer 3

Dlaczego nie spróbować użyć funkcji Flash do przesyłania dużych plików. Na przykład możesz wypróbować swfupload, która ma dobre wsparcie dla PHP.