Wiele wątków czytających z tego samego pliku

Question

Mam plik xml, który należy czytać od wielu razy. Próbuję użyć Parallel.ForEach, aby przyspieszyć te procesy, ponieważ żaden z odczytanych danych nie ma znaczenia, w jakiej kolejności jest czytany. Dane są właśnie używane do wypełniania obiektów. Mój problem polega na tym, że otwieram plik za każdym razem w wątku jako przeczytany, tylko dlatego, że jest otwarty przez inny program. (Nie mam go otwartego w edytorze tekstów ani nic takiego :))

Jak mogę dokonać wielu odczytów z tego samego pliku?

EDYTOWANIE: plik jest ~ 18KB całkiem mały. Jest czytany od około 1800 razy.

Dzięki

Answer 1

Jeśli chcesz wiele wątków odczytu z tego samego pliku, należy określić FileShare.Read:

using (var stream = File.Open("theFile.xml", FileMode.Open, FileAccess.Read, FileShare.Read)) 
{ 
    ... 
} 

Jednak nie osiągnie żadnego przyspieszenie od tego, dla wielu powodów:

1. Twój dysk twardy może czytać tylko jedną rzecz na raz. Chociaż masz wiele wątków uruchomionych w tym samym czasie, wszystkie te wątki będą czekały na siebie nawzajem.
2. Nie można łatwo przetworzyć części pliku XML. Zazwyczaj będziesz musiał przeanalizować cały plik XML za każdym razem. Ponieważ wiele wątków czyta go cały czas, wydaje się, że nie spodziewasz się, że plik się zmieni. Jeśli tak jest, to dlaczego musisz go przeczytać kilka razy?

Answer 2

Po otwarciu pliku, należy określić FileShare.Read:

using (var stream = new FileStream("theFile.xml", FileMode.Open, FileAccess.Read, FileShare.Read)) 
{ 
    ... 
} 

ten sposób plik można otworzyć kilka razy do czytania

Answer 3

W zależności od rozmiaru pliku a typ odczytów, które wykonujesz, może być szybszy, aby najpierw załadować plik do pamięci, a następnie umożliwić dostęp do niego bezpośrednio do wątków.

Nie podałeś żadnych szczegółów na temat pliku, odczytów itp., Więc nie mogę powiedzieć na pewno, czy spełniałby on twoje specyficzne potrzeby.

Ogólną przesłanką byłoby załadowanie pliku raz w jednym wątku, a następnie bezpośrednio (poprzez strukturę Xml) lub pośrednio (przez XmlNodes, itp.) Zapewnić dostęp do pliku do każdego z wątków. I wyobrazić sobie coś podobnego do:

1. załadować plik
2. Dla każdego wysłania zapytania XPath węzły pasujące do gwintów.

Jeśli nici nie modyfikują bezpośrednio XML, może to być opłacalna alternatywa.