Verwendung von PG 9.1 unter Ubuntu 12.04. Derzeit dauert es bis zu 24 Stunden, bis wir eine große Anzahl von UPDATE-Anweisungen in einer Datenbank ausgeführt haben, die folgende Form haben: UPDATE table SET field1 = constant1, field2 = constant2, ... WHERE id = constid (Wir überschreiben nur Felder...
Ich frage mich, wie man am effizientesten eine große Anzahl von Zeilen aus PostgreSQL löschen kann. Dieser Vorgang ist Teil einer täglichen wiederkehrenden Aufgabe, um Daten (ein Delta aus Einfügungen und Löschungen) in eine Tabelle zu importieren. Möglicherweise müssen Tausende, möglicherweise...
Ich habe einen Artikel gelesen, in dem erwähnt wurde , dass mit der Anweisung, mit der aus CSV-Dateien gelesen und die Daten in eine Datenbank eingefügt werden , 60.000 Einfügungen pro SekundeLOAD DATA IN FILE erzielt werden können. Warum sollte es sich von normalen Einsätzen unterscheiden? EDIT:...
Um die Besonderheiten zusammenzufassen: Wir müssen ungefähr 5 Millionen Zeilen in einer Vendor-Datenbank (Oracle) bereitstellen. Bei Stapeln von 500.000 Zeilen mit OracleBulkCopy(ODP.NET) funktioniert alles einwandfrei. Wenn wir jedoch versuchen, auf 5 Millionen zu skalieren, verlangsamt sich die...
Ich suche nach einer Möglichkeit, eine neue MySQL-Tabelle zu generieren, die ausschließlich auf dem Inhalt einer bestimmten CSV basiert. Die CSV-Dateien, die ich verwenden werde, haben die folgenden Eigenschaften: "|" abgegrenzt. Die erste Zeile gibt die Spaltennamen (Überschriften) an, auch "|"...
Ich muss ungefähr einmal pro Woche ungefähr 500.000 Datensätze mit IP-Suchdaten (schreibgeschützte Referenz) importieren (nur drei int / bigint-Spalten). Ich möchte mich nicht wirklich darum kümmern, die Daten mit der vorhandenen Tabelle zusammenzuführen. Ich würde es vorziehen, die alte zu löschen...
Wir arbeiten an einem Projekt, für das täglich Daten aus einer Excel-Tabelle importiert werden müssen. Die Daten werden aus einer vordefinierten Vorlage importiert und was wir denken, zuerst laden wir Daten in eine temporäre Tabelle hoch und führen einen Reinigungsvorgang durch (Entfernen unnötiger...
Ich arbeite derzeit an einem Projekt, bei dem Massenimportdaten aus Flatfiles (CSV) ungefähr 18 verschiedene Dateien enthalten, die jeweils über eine gespeicherte Prozedur mit einer bestimmten Tabelle verknüpft sind. Ich habe die Schritte im Handbuch zur Leistung beim Laden von Daten ausgeführt ....