Solr ładunki całego indeksu do pamięci

Question

Używam Solr danych podobnych do imię: Wiek: Płeć: bilans: nextbalance: odsetki

mam 30 m zapisy na łączną kwotę do 4G na dysku. Odbieram według wieku: 23, czyli tylko 50 rekordów. Mam indeks = "true" w schemacie xml. Solr wydaje się załadować cały indeks na dysk do pamięci (4G). Czy nie ma w pamięci tylko 40 nieparzystych rekordów?

Answer 1

Myślę, że to zależy od tego, jak skonfigurować pamięć podręczną (co robi i nie ma w pamięci). Ładowanie całego indeksu do pamięci może przynieść ogromne zwiększenie wydajności pod względem czasu potrzebnego na pobranie wyników, niezależnie od zapytania.

Szczegóły na temat konfiguracji pamięci podręcznej oraz szczegółowe dane na temat wydajności czynników:

• http://wiki.apache.org/solr/SolrCaching
• http://wiki.apache.org/solr/SolrPerformanceFactors

Answer 2

Może to jest cache dokumentów. Musisz określić jego rozmiar. Czy możesz sprawdzić następujące rzeczy w pliku solrconfig.xml?

<!-- documentCache caches Lucene Document objects (the stored fields for each document). 
    --> 
<documentCache 
    class="solr.LRUCache" 
    size="16384" 
    initialSize="16384"/> 

Answer 3

Pola, które są przechowywane, ale nie są indeksowane, są zapisywane na dysku, ale nie w pamięci RAM. Jednak 100% rekordów jest rzeczywiście indeksowanych w pamięci RAM, a te indeksy zawierają wszystkie indeksowane pola. Ale odwrócone indeksy są na to dość wydajne.

Jednak podczas wykonywania zapytań, SOLR odzyskuje cały zestaw zapisanych (ale nie indeksowanych) zawartości pól w pamięci RAM dla pasujących rekordów. Zwykle uważa się, że jest to pożądane zachowanie związane z buforowaniem, ponieważ oznacza to, że wyniki wyszukiwania mogą zostać wcześniej przesłane, co zmniejsza ogólny czas realizacji zapytania. Jak zwykle w przypadku SOLR, można skonfigurować zachowanie buforowania na wiele sposobów, aby dopasować budżet RAM i potrzeby bazy danych. Zobacz możliwości w pliku solrconfig.xml.

Należy zauważyć, że jest to złożony obszar i prawdopodobnie trudno będzie w pełni zrozumieć buforowanie, jeśli Google jest głównym źródłem informacji. Jest to obszar, w którym lepiej się uczyć z jednej z książek o SOLR.