Usuń dużą ilość danych w serwerze sql

Question

Załóżmy, że mam tabelę z rekordem 10000000. Jaka jest różnica między tymi dwoma rozwiązaniami?

1. usunąć dane, takie jak:

   DELETE FROM MyTable 
   

2. usuwanie wszystkich danych aplikacji z rzędu przez rzędu:

   DELETE FROM MyTable WHERE ID = @SelectedID 
   

to pierwsze rozwiązanie ma najlepszą wydajność? jaki jest wpływ na log i wydajność?

Answer 1

Jeśli masz, że wiele rekordów w tabeli i chcesz je usunąć wszystkie, należy rozważyć truncate <table> zamiast delete from <table>. Będzie to znacznie szybsze, ale pamiętaj, że nie może aktywować wyzwalacza.

Zobacz więcej szczegółów (w tym przypadku serwera SQL 2000): http://msdn.microsoft.com/en-us/library/aa260621%28SQL.80%29.aspx

Usuwanie tabeli w aplikacji wiersz po wierszu skończy się w długi, długi czas, ponieważ DBMS nie może nic optymalizacji, jak nie wie z góry, że wszystko usuniesz.

Answer 2

Pierwsza ma wyraźnie lepszą wydajność.

Po wybraniu opcji USUŃ [MyTable] po prostu usunie wszystko bez sprawdzania identyfikatora. Drugi spowoduje stratę czasu i operacji na dysku, aby zlokalizować odpowiedni rekord za każdym razem przed usunięciem.

Pogarsza się także, ponieważ za każdym razem, gdy rekord zniknie ze środka stołu, silnik może chcieć skondensować dane na dysku, marnując czas i pracując ponownie.

Być może lepszym pomysłem byłoby usunięcie danych w oparciu o kolumny z klastrem indeksu w porządku malejącym. Następnie tabela będzie zasadniczo skrócona od końca przy każdej operacji usuwania.

Answer 3

Opcja 1 utworzy bardzo dużą transakcję i będzie miała duży wpływ na log/wydajność, a także eskalację blokad, aby tabela była niedostępna. Opcja 2 będzie wolniejsza, chociaż wygeneruje mniejszy wpływ na dziennik (przy założeniu trybu zbiorczego/pełnego)

Jeśli chcesz pozbyć się wszystkich danych, przycięcie tabeli MyTable będzie szybsze niż oba, chociaż ma brak możliwości filtrowania wierszy, zmiana meta danych z tyłu i zasadniczo upuszczenie IAM na podłogę dla danej tabeli.

Answer 4

Najlepsza wydajność przy czyszczeniu stołu przyniesie TRUNCATE TABLE MyTable. Zobacz http://msdn.microsoft.com/en-us/library/ms177570.aspx dla bardziej opisowym wyjaśnieniu

Answer 5

Pierwszy usunie wszystkie dane z tabeli i będzie miał lepsze osiągi, że drugi, który będzie usuwał tylko dane z określonego klucza.

Teraz, jeśli trzeba usunąć wszystkie dane z tabeli, a nie polegać na użyciu wycofywania myśleć o wykorzystaniu truncate table

Answer 6

Jeśli trzeba ograniczyć do tego, co wiersze trzeba usunąć, a nie zrobić kompletnym usunąć lub nie można używać truncate table (np tabela odwołuje się ograniczenie FK lub zawarte w widoku indeksowanego), a następnie można wykonać usuwać w kawałkach:

DECLARE @RowsDeleted INTEGER 
SET @RowsDeleted = 1 

WHILE (@RowsDeleted > 0) 
    BEGIN 
     -- delete 10,000 rows a time 
     DELETE TOP (10000) FROM MyTable [WHERE .....] -- WHERE is optional 
     SET @RowsDeleted = @@ROWCOUNT 
    END 

ogólnie obcina jest najlepszy sposób i użyłbym tego, jeśli to możliwe. Ale nie można go stosować we wszystkich scenariuszach. Zwróć też uwagę, że TRUNCATE zresetuje wartość IDENTITY dla tabeli, jeśli taka istnieje.

Jeśli korzystasz z SQL 2000 lub wcześniejszych, warunek TOP nie jest dostępny, więc możesz użyć SET ROWCOUNT zamiast tego.

DECLARE @RowsDeleted INTEGER 
SET @RowsDeleted = 1 
SET ROWCOUNT 10000 -- delete 10,000 rows a time 

WHILE (@RowsDeleted > 0) 
    BEGIN 
     DELETE FROM MyTable [WHERE .....] -- WHERE is optional 
     SET @RowsDeleted = @@ROWCOUNT 
    END 

Answer 7

Znaleziono post on Microsoft TechNet.

Zasadniczo zaleca:

1. Korzystając SELECT INTO, skopiować dane, które chcesz zachować do tabeli pośredniej;
2. Skróć tabelę źródłową;
3. Skopiuj z INSERT INTO z tabeli pośredniej, dane do tabeli źródłowej;

..

BEGIN TRANSACTION 

SELECT * 
    INTO dbo.bigtable_intermediate 
    FROM dbo.bigtable 
    WHERE Id % 2 = 0; 

    TRUNCATE TABLE dbo.bigtable; 

    SET IDENTITY_INSERT dbo.bigTable ON; 
    INSERT INTO dbo.bigtable WITH (TABLOCK) (Id, c1, c2, c3) 
    SELECT Id, c1, c2, c3 FROM dbo.bigtable_intermediate ORDER BY Id; 
    SET IDENTITY_INSERT dbo.bigtable OFF; 
ROLLBACK TRANSACTION