Uruchamianie testów VSTS bez pliku mstest.exe

Question

Z przyczyn, których nie uwzględnię, wszystkie nasze testy jednostkowe wykorzystują framework testowy VSTS. Teraz chcę utworzyć skrypt MSBuild, który uruchamia testy, ale nie chcę używać mstest.exe z różnych powodów (jest wolniejszy, wymaga instalacji Visual Studio wszędzie, muszę zachować testrunconfig, itp.)

Widziałem, że TestDriven.net i TeamCity są w stanie uruchomić "NUnitowy styl testów VSTS", bez użycia mstest.exe. Czy wiesz o jakimkolwiek autonomicznym narzędziu wiersza poleceń, które to robi?

Answer 1

można wykonać testy systemu Team (MSTest) w NUnit jeśli użyć specjalnego NUnit Addin który rozpoznaje atrybutów test MS (TestClass, etc).

Oprogramowanie Exact Magic Software ma funkcję open-source "test-adapter", która może to zrobić.

AKTUALIZACJA: Przerobiłem adapter MSTs NUnit firmy Exact Magic dla NUnit 2.5.2.

• pobrania tutaj: http://snippetware.googlecode.com/files/ExactMagic.MstsAdapter.zip
• Czytaj więcej na ten temat here: http://www.bryancook.net/2009/10/mstest-nunit-adapter.html

Answer 2

Możliwe jest uruchamianie MSTests bez instalowania Visual Studio. Zobacz how-do-i-use-mstest-without-visual-studio.

Zrobiłem to, abym mógł uruchomić moje testy w ramach procesu CI. (Używam CC.NET dla mojego rozwiązania CI).

---

Jestem w podobnej sytuacji jak ty, ponieważ chcę korzystać z TestDriven.NET, aby uzyskać statystyki zasięgu kodu. Ale mam problemy. Mój pierwszy problem polega na tym, że używam atrybutów AssemblyInitialize, aby zainicjować połączenie z bazą danych. Nie jest to obsługiwane przez NUnit, więc około połowa moich testów kończy się niepowodzeniem, podczas gdy działają poprawnie w MSTest.

Wygląda więc na to, że tłumaczenie testów z jednego szkieletu testowego na inny ma pułapki. Jeśli jesteś tego świadomy, idź naprzód, ale lepiej będzie zachować spójność w ramach jednego testu.

Answer 3

Wygląda na to, że TeamCity po prostu używa numeru Gallio do uruchamiania testów VS. Galijo wydaje się mieć integrację msbuild i dźwięki idealne, ale po bliżej spojrzeć wydaje się, że będzie to wymagało VS zainstalować tak jak MSTest jak wydaje się zależeć od MS exes:

The plugin enable condition was not satisfied: '${process:DEVENV.EXE} or 
${process:VSTESTHOST.EXE} or 
${process:QTAGENT.EXE} or 
${process:QTAGENT32.EXE} or 
${process:QTDCAGENT.EXE} or 
${process:QTDCAGENT32.EXE}'. 
Host process exited with code: 0 

powiedział, że jest to brzmi co najmniej jedna osoba ma to działa:

Christoph De Baene - Running MSTest without Visual Studio

Answer 4

Prowadzimy VSTS testuje za pomocą msbuild TestToolsTask na serwerze Cruise sterowania. To nie używa pliku wykonywalnego MSTEST - warunku, o który prosisz - ale używa różnych zależności TFS.

Należy zauważyć, że przeprowadzamy testy z testowania VSTS dla NUnit, głównie dlatego, że możemy tworzyć rozszerzenia dla NUnit w celu wykonywania przydatnych zadań.