PostgreSQL jak znaleźć jakiekolwiek zmiany w ciągu ostatnich n-minut

Question

Piszę program, który synchronizuje bazy danych PostgreSQL i MS SQL Server (i dodaje kilka zmian w tym przejściu). Z wieloma milionami rekordów, zajmuje to dużo czasu i ładuje serwer dość źle z select *; wymaga również więcej zasobów do przeanalizowania niezmienionych rekordów i sprawdzenia ich pod kątem serwera MS SQL.

Czy są jakieś dzienniki w PostgreSQL, które można przeanalizować, aby poznać zmiany, które miały miejsce w ciągu ostatnich n minut? To pozwoliłoby mi wybrać tylko te rekordy, które muszę wykonać; poprawa wydajności.

Answer 1

PostgreSQL, znaleźć zmiany w ciągu ostatnich n minutach:

Postgresql nie automatycznie zapisywać czas, wiersze zostały dodane/zaktualizowane/usunięty (to naprawdę spowolnić dla PostgreSQL do obsługi znaczników czasu tak czy nie chciałeś tego).

Musisz to zrobić samodzielnie: Dodaj kolumnę znacznika czasu do tabeli. Po wstawieniu wiersza do tabeli zaktualizuj kolumnę znacznika czasu do current_timestamp. Podczas wybierania wiersza, użyj select, która filtruje w dół, gdzie datownik jest większa niż n minut temu, co następuje:

Get wiersze gdzie datownik jest większa niż w terminie:

SELECT * from yourtable 
WHERE your_timestamp_field > to_date('05 Dec 2000', 'DD Mon YYYY'); 

Uzyskaj wierszy, które zostały zmienione w ciągu ostatnich n minutach:

SELECT * from yourtable 
WHERE your_timestamp_field > current_timestamp - interval '5 minutes' 

Answer 2

można użyć podejście oparte wyzwalacz opisany tutaj:

http://wiki.postgresql.org/wiki/Audit_trigger

Zasadniczo każda zmiana tabeli uruchamia wyzwalacz, który może zapisać niektóre informacje w tabeli dziennika.