Jak skonfigurować RSpec do testowania wydajności "z boku"

Question

Używamy RSpec w projekcie szyn do testowania jednostkowego. Chciałbym skonfigurować testy wydajności w RSpec, ale zrobić to w taki sposób, aby nie zakłócać "normalnych" funkcji i urządzeń.

Idealnie byłoby móc oznaczyć moje specyfikacje wydajności w taki sposób, że nie są one domyślnie uruchamiane. Następnie, gdy określę, aby uruchomić te specyfikacje jawnie, załaduje on inny zestaw urządzeń (sensowne jest przeprowadzanie testów wydajności przy znacznie większym i bardziej "produkcyjnym" zestawie danych).

Czy to możliwe? Wygląda na to, że tak powinno być.

Czy ktoś skonfigurował coś takiego? Jak sobie z tym poradziłeś?

Answer 1

udało mi się dostać to, czego szukałem poprzez następujące:

# Exclude :performance tagged specs by default 
config.filter_run_excluding :performance => true 

# When we're running a performance test load the test fixures: 
config.before(:all, :performance => true) do 
    # load performance fixtures 
    require 'active_record/fixtures' 
    ActiveRecord::Fixtures.reset_cache 
    ActiveRecord::Fixtures.create_fixtures('spec/perf_fixtures', File.basename("products.yml", '.*')) 
    ActiveRecord::Fixtures.create_fixtures('spec/perf_fixtures', File.basename("ingredients.yml", '.*')) 
end 

# define an rspec helper for takes_less_than 
require 'benchmark' 
RSpec::Matchers.define :take_less_than do |n| 
    chain :seconds do; end 
    match do |block| 
    @elapsed = Benchmark.realtime do 
     block.call 
    end 
    @elapsed <= n 
    end 
end 

# example of a performance test 
describe Api::ProductsController, "API Products controller", :performance do 
    it "should fetch all the products reasonably quickly" do 
    expect do 
     get :index, :format => :json 
    end.to take_less_than(60).seconds 
    end 
end 

Ale ja raczej się zgadza z punktu Marnen, że nie jest to najlepszy pomysł dla testowania wydajności.

Answer 2

Jeśli chcesz przeprowadzić test wydajności, dlaczego nie uruchomić New Relic lub czegoś z migawką danych produkcyjnych? Tak naprawdę nie potrzebuję różnych specyfikacji.