Jak usunąć stare dane z elastycznego indeksu wyszukiwania, ponieważ indeks zawiera dużą ilość danych wstawianych każdego dnia.Usuwanie lub usuwanie starych danych z elastycznego wyszukiwania
Odpowiedz
Możesz to zrobić za pomocą wtyczki delete by query.
Zakładając, że masz jakieś timestamp
lub creation date
pól w indeksie, zapytanie będzie wyglądał jak ten
DELETE /your_index/your_type/_query
{
"query": {
"range": {
"timestamp": {
"lte": "now-10y"
}
}
}
}
spowoduje to usunięcie zapisów starszych niż 10 lat.
Mam nadzieję, że to pomoże
Czy jest jakiś sposób, aby to zrobić w formie skryptu, więc nie musimy ręcznie uruchamiać zapytania? – sri
Czy to zapytanie kasowania całkowicie kasuje rekordy z indeksu i pozwala na wstawienie nowych rekordów – sri
Możesz ustawić w górę 'zadanie cron' do zrobienia tego codziennie, rekordy ** nie ** są wymazywane po wykonaniu delete, są ** oznaczone ** jako usunięte i podczas scalania segmentów są faktycznie usuwane, możesz zobaczyć wzrost rozmiaru indeksu po Usunięcie lub aktualizacja, możesz użyć opcji [wymuszaj scalanie] (https://www.elastic.co/guide/en/elasticsearch/reference/current/indices-forcemerge.html), aby zoptymalizować indeks. – ChintanShah25
dane Split do codziennych indeksów i używać jako aliasu starej nazwy indeksu. następnie usuń każdy indeks codziennie. podobnie jak logstash:
Indeksy dzienne: logstash-20151011
, logstash-20151012
, logstash-20151013
.
Pełna alias: logstash
Następnie codziennie usuń ostatni indeks.
Korzystanie z wielu indeksów jest drogą do zrobienia. Aby usunąć starsze indeksy, możesz użyć kustosza: https://www.elastic.co/guide/en/elasticsearch/client/curator/current/index.html – slim
- 1. Usuwanie starych problemów z Xcode
- 2. Automatyczne usuwanie starych nagrań IntelliTrace
- 3. Czat Firebase - usuwanie starych wiadomości
- 4. Mixpanel - Zbiorcze usuwanie starych użytkowników
- 5. Usuwanie danych z LocalStorage
- 6. usuwanie lub usuwanie ManagedObject w CoreData
- 7. Usuwanie danych z pliku HDF5
- 8. Usuwanie danych z tabel zależnych
- 9. Usuwanie danych statycznych onDestroy()
- 10. Rolling log Pliki i usuwanie starych plików dziennika
- 11. Usuwanie danych z zagnieżdżonych obiektów bez mutowania
- 12. Usuwanie pasków przewijania z QWebEngineView lub QWebEnginePage
- 13. Usuwanie rozszerzenia HTML lub ASPX
- 14. Usuwanie znaków spoza ASCII z plików danych
- 15. Usuwanie najstarszych rekordów z bazy danych
- 16. Usuwanie ogromnych ilości danych z ogromnego stołu
- 17. Usuwanie encji html z baz danych
- 18. Usuwanie danych z tabeli DynamoDb automatycznie
- 19. Dodawanie/usuwanie elementów danych z parametrami szablonu?
- 20. Usuwanie obiektów/danych z obszaru roboczego
- 21. Usuwanie wpisu z prostokątnym
- 22. C++ api do wyszukiwania elastycznego
- 23. Usuwanie z kolekcji Observable
- 24. Ponownie uruchom węzeł elastycznego wyszukiwania
- 25. Usuwanie cieni z UIWebView
- 26. Usuwanie niezdefiniowanych wartości z tablicy
- 27. Usuwanie akcentów z QStringa
- 28. Usuwanie wersji podstawowej plików xcdatamodel
- 29. Usuwanie wsadowe hibernacji vs pojedyncze usuwanie
- 30. Mongoose, usuwanie właściwości z modelu
Dlaczego to pytanie zostało odrzucone? – slim