Chcę zoptymalizować szybkość aktualizacji dziesiątek tysięcy rekordów importowanych z innego systemu. Używam Array DML i wysyłam parametry partiami po 3000.

Obecnie robię coś takiego

MERGE INTO <TABLE>
USING ( SELECT 1 FROM RDB$DATABASE )  <-- This is purely to support the merge syntax
ON TABLE.KEY = :PARAM1
WHEN MATCHED AND TABLE.FIELD1<:PARAM2 THEN
UPDATE SET FIELD1=:PARAM2, FIELD2=:PARAM3
WHEN NOT MATCHED THEN
INSERT (FIELD1,FIELD2,FIELD3,FIELD4) VALUES (:PARAM1,:PARAM2,PARAM3,PARAM4)

SELECT 1 FROM RDB$DATABASE to sposób Firebird v3 na po prostu wybranie cyfry 1, ponieważ nie używam wyniku, ale składnia wymaga sekcji USING, ale wydaje się to trochę zawiłe.

Myślałem o przepisaniu tego jako scenariusza, ale nie sądziłem, że poprawi to szybkość.

sql firebird
0
Richard Shuck 16 grudzień 2019, 19:27
Czy twoje obecne podejście jest zbyt wolne? Co konkretnie oznacza „zbyt wolno”? Oddzielnie z MERGE wynika, że ​​„klucz:param1, pole1:param2 i pole2:param3”, chyba że rekord jest nowy, w takim przypadku „pole1:param1, pole2:param2 i tak dalej”. Czy to literówka?
 – 
pilcrow
16 grudzień 2019, 19:50
1
"Używam Array DML i wysyłam parametry w partiach po 3000.", Firebird 3 i wcześniejsze nie obsługują wykonywania wsadowego, więc to, co jest faktycznie zrobione, jest równoznaczne z wykonaniem 3000 razy. W każdym razie spróbuj wstawić dane do tabeli pomostowej (np. globalnej tabeli tymczasowej) i użyj tej tabeli pomostowej jako źródła dla instrukcji scalania. Lub użyj tabeli zewnętrznej jako źródła.
 – 
Mark Rotteveel
16 grudzień 2019, 21:35

1 odpowiedź

Szukałem kodu, który byłby mniej chwytliwy i pominąłem bezsensowną instrukcję USING, ale po przeszukaniu sieci wydaje się, że jest to najszybszy sposób na przetwarzanie poleceń zbiorczego wstawiania lub aktualizowania, gdy masz już wartości i nie pochodzą one z tabeli.

Mogłem umieścić wszystkie wartości w tabeli pomostowej i użyć jej jako źródła, które chociaż dawało lepiej wyglądające stwierdzenie, podczas testowania prędkość była ogólnie wolniejsza i wymagała ponad 200 tymczasowych tabel pomostowych.

0
Richard Shuck 22 styczeń 2021, 19:22

Podobne pytania

11 Oracle: jak UPSERT (zaktualizować lub wstawić do tabeli?)
2 Jak zaktualizować, jeśli istnieje, wstawić, jeśli nie (AKA „upsert” lub „merge”) w MySQL?
11 Wstaw do tabeli MySQL lub zaktualizuj, jeśli istnieje
2 Dołącz nazwę sys.databases jako kolumnę w dynamicznym SQL UNION
1 Muszę wstawić / zaktualizować wiersz na stole Firebird

Nowe pytania

2 Jak połączyć 2 liczby za pomocą kropki za pomocą T-SQL?
2 łączenie list wartości w postgresie
1 wybierz I'd z bazy danych za pomocą CONDITIONS IN SQL
2 SQL: Wiele klauzul „WHERE” — czy mogę dynamicznie wyodrębniać miejsca, w których jedna lub wiele nie zostało spełnionych?
2 Jak sprawdzić, który DZIEŃ każdego miesiąca i roku jest najwyższą wartością w jakiejś kolumnie w Teradata SQL?
1 Dlaczego nie jest poprawnie usuwane z tablicy **JSON**?
2 Jak pobrać dane z ostatnich 13 miesięcy z bazy danych?
2 (Proste?) Zapytanie SQL: Wyświetl wszystkie informacje o klientach dla klientów z 2 zamówieniami lub więcej
1 Jak mogę użyć wartości zmiennej w instrukcji IN?
2 Nie można dodać klucza obcego do tabeli MariaDB/MySQL
Wszystkie pytania dotyczące sql >

sql

Structured Query Language (SQL) to język służący do wykonywania zapytań w bazach danych. Pytania powinny zawierać przykłady kodu, strukturę tabeli, przykładowe dane i znacznik używanej implementacji DBMS (np. MySQL, PostgreSQL, Oracle, MS SQL Server, IBM DB2 itp.). Jeśli Twoje pytanie dotyczy wyłącznie konkretnego DBMS (używa określonych rozszerzeń / funkcji), użyj zamiast tego tagu tego DBMS. Odpowiedzi na pytania oznaczone tagiem SQL powinny używać standardu SQL ISO / IEC.

Więcej na temat sql...