Jak obliczyć optymalny rozmiar porcji do przesłania dużych plików?

Question

Czy istnieje coś takiego, jak optymalny rozmiar porcji do przetwarzania dużych plików? Mam usługę przesyłania (WCF), która służy do akceptowania przesyłania plików w zakresie od kilkuset megabajtów.

Eksperymentowałem z rozmiarami 4KB, 8KB do 1MB porcji. Większe rozmiary porcji są dobre dla wydajności (szybsze przetwarzanie), ale kosztem pamięci.

Czy istnieje sposób na określenie optymalnego rozmiaru porcji w momencie przesyłania plików. W jaki sposób można wykonać takie obliczenia? Czy byłoby to połączenie dostępnej pamięci z klientem, procesorem i przepustowością sieci, która określa optymalny rozmiar?

Cheers

EDIT: Prawdopodobnie należy wspomnieć, że aplikacja klienta będzie w Silverlight.

Answer 1

Jeśli obawiasz się wyczerpania zasobów, to optymalnie najlepiej jest określić, oceniając współbieżność ładowania podglądu z dostępną pamięcią systemu. Ile jednoczesnych operacji przesyłania w danym momencie będzie kluczową zmienną w obliczeniach, jakie możesz wykonać. Wszystko, co musisz zrobić, to upewnić się, że masz wystarczająco dużo pamięci, aby obsłużyć współbieżność przesyłania, a to dość banalne. Pamięć jest tania i najprawdopodobniej zabraknie przepustowości sieci na długo przed osiągnięciem punktu, w którym twoja współbieżność przekroczyłaby twoją dostępność pamięci.

Po stronie wydajności nie jest to coś, co można naprawdę zoptymalizować podczas projektowania i tworzenia aplikacji. Musisz mieć zainstalowany system, użytkownicy przesyłają pliki na prawdziwe, a następnie możesz monitorować rzeczywistą wydajność środowiska wykonawczego.

Spróbuj wielkości porcji odpowiadającej rozmiarowi okna sieci TCP/IP. To mniej więcej tak optymalne, jak byś naprawdę potrzebował czasu projektowania.