Jak zmodyfikować zachowanie równoważenia obciążenia, którego Jenkins używa do sterowania urządzeniami slave?

Question

Używamy Jenkinsa do naszego systemu budowania CI. Używamy również "współbieżnych kompilacji", aby Jenkins samodzielnie budował każdą zmianę. Oznacza to, że często mamy jednocześnie 5 lub 6 kompilacji tego samego zadania. Aby to uwzględnić, mamy 4 niewolników, każdy z 12 wykonawcami.

Problem polega na tym, że Jenkins tak naprawdę nie balansuje pomiędzy swoimi niewolnikami. Próbuje zbudować zadanie na tym samym urządzeniu podrzędnym, na którym wcześniej było wbudowane (prawdopodobnie w celu zmniejszenia synchronizacji czasu z kontrolą źródła). Jest to problem, ponieważ Jenkins zbuduje wszystkie 6 wystąpień naszej kompilacji na tym samym niewolniku (lub częściej między 2 niewolnikami). Jedna maszyna komplikuje się i działa bardzo wolno, podczas gdy reszta z nich siedzi bezczynnie.

Czy istnieje wtyczka lub coś, co zmienia zachowanie równoważenia obciążenia, którego używa Jenkins do kontrolowania swoich niewolników?

Answer 1

Jeśli nie możesz znaleźć wtyczki, który robi to automatycznie, oto pomysł co można zrobić:

• Install Node Label Parameter plugin
• Dodaj niewolnik parametr do pracy
• Zastrzeganie zadania do uruchom na ${SLAVE}

• Dodaj zadanie wyzwalacza, które wykona następujące czynności:

  • Przeanalizuj rozkład obciążenia za pomocą skryptu Groovy Script i zdecyduj, który węzeł rozpocznie następną kompilację.
  • Wyślij kompilację do tego węzła za pomocą Parametertized Trigger plugin , przypisując odpowiednią wartość parametrowi SLAVE.

W celu analizy rozkładu obciążeń trzeba zainstalować Groovy plugin i zapoznania się z Jenkins Main Module API. Oto some useful initial pointers.

Answer 2

Jeśli Twoje maszyny budujące nie mogą wygodnie obsługiwać więcej niż 1 kompilacji, dlaczego chcesz skonfigurować je z 12 executorami? Jeśli tak jest rzeczywiście, powinieneś zmniejszyć liczbę executorów do 1. Mój Jenkins ma 30 niewolników, każdy z 1 wykonawcą.

Answer 3

Mieliśmy do czynienia z podobnym problemem. Dlatego stworzyłem wtyczkę, która zmienia moduł równoważenia obciążenia w Jenkins, aby wybrać węzeł, który aktualnie ma najmniejsze obciążenie - https://wiki.jenkins-ci.org/display/JENKINS/Least+Load+Plugin

Wszelkie uwagi są mile widziane.

Answer 4

Można również użyć Throttle Concurrent Builds plugin ograniczyć ile przypadki pracy może pracować równolegle na tym samym węźle