Przetwarzanie plików za pomocą ParallelForeach. Czy to jest najlepsze podejście?

Question

Po prostu kilka porad Mam 100.000+ xml pliku do przetworzenia i przenieść się do innego systemu.

Koncepcja jest dość prosta mam pętlę jak:

public void ProcessFiles() 
    { 
     IEnumerable<FileInfo> orderedFiles = GetFilesOrdered(); 

     foreach (FileInfo file in orderedFiles) 
     { 
      ProcessFile(file); 
     } 
    } 

Czytałem o Task Parallel biblioteki, ale nie tak pewny siebie. Nie jest to bardzo przyklejone do gwintowania. Wygląda na to, że TPL zawija wiele dla mnie.

Mówiąc prościej jest to tylko przypadek użycia parallel.Foreach?

każda próbka lub sugestie

Answer 1

Tak, to może być tak proste, jak zastąpienie foreach z Parallel.ForEach.

Należy pamiętać, że wiele wątków jednocześnie wykonywałoby ProcessFile.

Tak więc, jeśli piszesz do dowolnego stanu współdzielonego w tej metodzie, będziesz musiał użyć konstrukcji synchronizacji, aby go chronić.

Jeśli jesteś nowym wielowątkowości, istnieje wielki ebook wprowadzający należy przeczytać tutaj: Albahari

Answer 2

nadzieję, że to pomocne dla Ciebie. Prosty fragment do pokazania, jak przesuwać plik równolegle.

 List<FileInfo> files = new List<FileInfo>(); 
     files.Add(new FileInfo("F:\\1.xml")); 
     files.Add(new FileInfo("F:\\2.xml")); 
     files.Add(new FileInfo("F:\\3.xml")); 



     Parallel.ForEach(files, f => 
     { 
      f.MoveTo("d:\\test\\" + f.Name); 
     });