List and Linq To Sql Performance Issue

Question

Mam jedną tabelę (Mój Sql) z 2 milionami rekordów i jedną listą z 100 rekordami. Mam listę Z wyjątkiem wyrażenia lamda do wyszukiwania wszystkich adresów URL znajdujących się na liście, ale nie w tabeli.

Problem polega na tym, że zajmuje to dużo czasu około 5 minut. Pracuję w potężnym VPS oraz kodzie i bazie danych na tym samym serwerze.

Proszę zasugerować mi Wszystkie możliwe sposoby zwiększenia wydajności linq do sql i linq do encji.

mojego kodu Is`return

Urls.Except(DbContext.postedurllists.Select(crawl => crawl.PostedUrl).ToList()).ToList();` 

Gdzie Urls Czy Lista zawierających 100 adresów URL i postedurllists jest tabela, która zawiera zapis 2 miliony. Dzięki

Answer 1

Aktualnie pobierasz wszystkie z adresów URL z bazy danych. To nie jest dobry pomysł. Zamiast tego proponuję ciągnięcie skrzyżowanie z bazy danych skutecznie przekazując swoją listę Urls do baza danych, a robi except na podstawie wyników:

var commonUrls = DbContext.postedurllists 
          .Select(c => c.PostedUrl) 
          .Where(url => Urls.Contains(url)) 
          .ToList(); 

var separateUrls = Urls.Except(commonUrls);