CasperJS/PhantomJS znacznie wolniej niż Curl

Question

Po wypróbowaniu curl www.yelp.com trwa to 1,1 s. Jednak pobieranie strony za pomocą CasperJS trwa ponad minutę!

Czy to normalne? Jak mogę dowiedzieć się, co spowalnia casper/phantom? Podejrzewam jego niektóre przekierowania HTTP, których casper nie śledzi?

var casper = require('casper').create(); 
var url = 'http://www.yelp.com'; 

casper.start(url); 
casper.then(function() { 
    console.log( this.getHTML()); 
    this.exit(); 
}); 

casper.run(); 

Answer 1

Czy jesteś na Windows? Jeśli tak, istnieje tajemniczy problem z siecią, gdy używany jest automatyczny serwer proxy. Zobacz informacje o wydaniu, aby uzyskać więcej informacji: http://phantomjs.org/release-1.9.html.

Ogólnie spróbuj przeanalizować żądania i odpowiedzi sieciowe. Bardzo prosty sposób śledzić ruch sieciowy:

page.onResourceRequested = function (request) { 
    console.log('Request ' + JSON.stringify(request, undefined, 4)); 
}; 
page.onResourceReceived = function (response) { 
    console.log('Receive ' + JSON.stringify(response, undefined, 4)); 
}; 

trzeba go dostosować dalej, jeśli chcesz taktowanie itp Przeczytaj dokumentację na ten temat Network Monitoring funkcji.