jsoup wysyłanie i cookie

Question

Próbuję użyć jsoup do zalogowania się na stronie, a następnie skrobania informacji, napotykam na problem, mogę się zalogować i utworzyć dokument z index.php, ale nie mogę uzyskać innych stron na stronie. Wiem, że muszę ustawić plik cookie po opublikowaniu, a następnie załadować go, gdy próbuję otworzyć inną stronę w witrynie. Ale jak to zrobić? Poniższy kod pozwala mi zalogować się i uzyskać index.php

Document doc = Jsoup.connect("http://www.example.com/login.php") 
       .data("username", "myUsername", 
        "password", "myPassword") 
       .post(); 

Wiem, że mogę użyć apache httpclient do tego, ale nie chcę.

Answer 1

Po zalogowaniu się do witryny prawdopodobnie ustawia ona autoryzowany plik cookie sesji, który należy przesłać na kolejnych prośbach o zachowanie sesji.

Można dostać cookie takiego:

Connection.Response res = Jsoup.connect("http://www.example.com/login.php") 
    .data("username", "myUsername", "password", "myPassword") 
    .method(Method.POST) 
    .execute(); 

Document doc = res.parse(); 
String sessionId = res.cookie("SESSIONID"); // you will need to check what the right cookie name is 

a następnie wysłać go na następne żądanie jak:

Document doc2 = Jsoup.connect("http://www.example.com/otherPage") 
    .cookie("SESSIONID", sessionId) 
    .get(); 

Answer 2

//This will get you the response. 
Response res = Jsoup 
    .connect("loginPageUrl") 
    .data("loginField", "login@login.com", "passField", "pass1234") 
    .method(Method.POST) 
    .execute(); 

//This will get you cookies 
Map<String, String> loginCookies = res.cookies(); 

//And this is the easiest way I've found to remain in session 
Document doc = Jsoup.connect("urlYouNeedToBeLoggedInToAccess") 
     .cookies(loginCookies) 
     .get(); 

Answer 3

gdzie kod był:

Document doc = Jsoup.connect("urlYouNeedToBeLoggedInToAccess").cookies().get(); 

Miałem trudności, dopóki się nie zmieniłem to:

Document doc = Jsoup.connect("urlYouNeedToBeLoggedInToAccess").cookies(cookies).get(); 

Teraz działa bez zarzutu.

Answer 4

Oto co można spróbować ...

import org.jsoup.Connection; 


Connection.Response res = null; 
    try { 
     res = Jsoup 
       .connect("http://www.example.com/login.php") 
       .data("username", "your login id", "password", "your password") 
       .method(Connection.Method.POST) 
       .execute(); 
    } catch (IOException e) { 
     e.printStackTrace(); 
    } 

Teraz zapisz wszystkie pliki cookie i uczynić wniosek drugiej strony, którą chcesz.

//Store Cookies 
cookies = res.cookies(); 

Żądanie na inną stronę.

try { 
    Document doc = Jsoup.connect("your-second-page-link").cookies(cookies).get(); 
} 
catch(Exception e){ 
    e.printStackTrace(); 
} 

Zapytaj, czy potrzebujesz dalszej pomocy.