6
Słyszałem, że duże rozmiary partii nie dają żadnej dodatkowej wydajności.Jaka jest optymalna liczba rzeczy luzem za pomocą metody InsertBatch w sterowniku mongodb C#?
jakie jest optimum?
A
Odpowiedz
7
W przypadku wywoływania funkcji Wstawianie, aby wstawiać dokumenty pojedynczo, dla każdego dokumentu istnieje sieć obiegowa. Jeśli wywołasz funkcję InsertBatch w celu wstawienia dokumentów w partiach, dla każdej partii zamiast dla każdego dokumentu jest realizowana wycieczka objazdowa w sieci. Funkcja InsertBatch jest bardziej wydajna niż Insert, ponieważ zmniejsza liczbę tras w sieci.
Załóżmy, że musiał włożyć 1.000.000 dokumentów, można analizować liczbę sieciowych rejsów dla różnych wielkości partii:
- wielkość partii 1: 1.000.000 obie strony
- wielkość partii 10: 100,000 rejsów
- wielkość partii 100: 10000 obie strony
- wielkość partii 1000, 1000 obie strony
- etc ...
Widać więc, że nawet partia o wielkości zaledwie 10 już wyeliminowała 90% podróży w obie strony, a wielkość partii 100 wyeliminowała 99% podróży w obie strony.
Jest to nieco uproszczona analiza, ponieważ pomija fakt, że wraz ze wzrostem rozmiarów partii zmieniają się rozmiary wiadomości, ale są mniej lub bardziej dokładne.
Nie sądzę, że istnieje jeden optymalny rozmiar partii dla jednego jednego. Powiedziałbym, że większe partie są bardziej wydajne, ale gdy masz 10-100 dokumentów na partię, będzie bardzo mała poprawa wydajności przy większych partiach.
Powiązane problemy
- 1. Wstawianie luzem w MongoDB za pomocą mangusty
- 2. wyszukiwanie elastyczne optymalna liczba wzorców
- 3. Jaka jest optymalna konwencja nazewnictwa dla plików testowych w Pythonie?
- 4. Ruby: Dodawanie rzeczy do zainicjowania metody za pomocą modułów
- 5. Luzem upsert z MongoDB Java 3.0 Sterownik
- 6. Jak wyszukiwać dokumenty za pomocą pola "_id" w sterowniku Java mongodb?
- 7. Używanie poleceń powłoki MongoDB na sterowniku MongoDB 10Gen
- 8. Zwiększenie wydajności za pomocą wkładek luzem w porównaniu do zwykłych wkładek w MongoDB
- 9. Dziwne rzeczy w JavaScript "za"
- 10. Metody wywoływania za pomocą nazw w C#
- 11. Wstaw słownik do MongoDB za pomocą sterownika C#
- 12. jaka jest alternatywa metody angle.isString() w angular2?
- 13. Przechowywanie Słownika z wartościami polimorficznymi w mongoDB za pomocą C#
- 14. Jaka jest maksymalna liczba ponumerowanych wyrażeń regularnych?
- 15. Jaka jest maksymalna liczba plików na słoik?
- 16. Polimer odśwież wartość właściwości, która jest obliczana za pomocą metody
- 17. Czy ta formuła jest powtarzalna, czy optymalna?
- 18. Jak wygląda przykładowy błąd MongoDB w natywnym sterowniku NodeJS?
- 19. Luzem IAP ładowanie za pomocą Application Loader, poziomy cenowe
- 20. Obszary TFS, definicja i konfiguracja optymalna
- 21. Mongodb w przenośnej aplikacji C#
- 22. Odzyskiwanie danych z mongodb za pomocą C# sterownika
- 23. Jak używać asynchronicznie metody AsQueryable z MongoDb C# Driver 2.1?
- 24. Jaka wersja MongoDB jest zainstalowana na Ubuntu
- 25. Maksymalna liczba plików, które można otworzyć za pomocą c "fopen" w linux
- 26. Jaka jest różnica w ustawieniach setBrowserUrl() i url() w sterowniku internetowym Selenium 2 dla phpunit?
- 27. Liczba Liczba zapytań Obciążenie strony za pomocą PDO
- 28. KeyNotFoundException za pomocą metody HtmlEntity.DeEntitize()
- 29. Jaka jest maksymalna liczba bloków możliwa w CUDA?
- 30. Jaka jest złożoność set_intersection w C++?
Brak odniesienia do miejsca, w którym je usłyszałeś? Hmm, zwykle powiedziałbym wszystko, co pasuje do 16meg (max)? – Sammaye
Otworzyłem numer w jirach i zostało to wspomniane w komentarzach https://jira.mongodb.org/browse/CSHARP-725 – Serdar
Ok Myślę, że rozumiem, jesteś za jednym wywoływaniem wsadowym wywołania z dokumentem o wielkości większej niż 16meg , co Robert mówi również o tym, kiedy duża partia pomaga, zależy od tego, jak czyste są twoje dane, jeśli ciągle powraca do klienta z powodu błędów, to bardziej wydajne będzie uruchamianie mniejszych partii (jak to mówi ponownie). Co do optymalnej ilości tutaj: hmm, może 100 w partii? – Sammaye