Ogromne alokacji pamięci podczas korzystania EPPlus Excel Biblioteka

Question

Kontekst

Używam EPPLUS jak moje narzędzie do automatyzacji generowanie raportów Excel przy użyciu C# jako język klienta biblioteki.

Problem:

Po wypróbowaniu napisać raport naprawdę duże (odpowiedź na zapytanie SQL), z tabel przestawnych, wykresów i tak dalej, i kończy się o Out of Memory Exception.

Rozwiązywanie problemów

Aby rozwiązać problem, postanowiłem otworzyć istniejący raport, który zawiera 138MB i użyć obiektu GC spróbować rzucić okiem na to, co się dzieje z moją pamięcią, a oto wyniki .

ExcelPackage pkg = new ExcelPackage (new FileInfo (@"PATH TO THE REPORT.xlsx")); 
ExcelWorkbook wb = pkg.Workbook; 

Wyniki usuwania śmieci przed drugą linią kodu i po.

Tak, nie mam pojęcia, co robić od teraz. Wszystko, co robię, to otwarcie raportu, który pochłania 10 razy (9,98) razy rozmiar samego raportu, w pamięci.

~ 138 MB pliku Excela, zajmuje 1.370.817.264 bajty pamięci RAM.

Aktualizacja One:

Jest dość niedawno beta version of EPPlus to, że ma na to changelog:

New Cell store 
* Less memory consumtion 
* Insert columns (not on the range level) 
* Faster row inserts 

Po zaktualizowaniu Nuget, nadal mam ten sam wyjątek, który jest wyrzucany po pierwszą linię, zamiast podnosić w drugiej linii.

Answer 1

Nowoczesne pliki Excel, tj. Pliki Xlsx są skompresowane zip i często osiągają kompresję do 10%. Właśnie zdekompresowałem wygenerowany plik o wielkości 1,6 MB za pomocą podobnego narzędzia i odkryłem, że został wyodrębniony do 18,8 MB danych.

Masz plik 0.138 GB, który korzysta z 1.370 GB pamięci, czyli prawie dokładnie 10%. Nieskompresowana reprezentacja w pamięci to jedzenie twojej pamięci.

Jeśli jesteś ciekawy, możesz użyć narzędzia takiego jak 7-Zip, aby wyodrębnić pliki Xlsx, lub możesz zmienić nazwę pliku, aby zakończyć. Zip i przeglądać go w systemie Windows.