Der letzte Teil des ETL-Prozesse ist die Ladephase, der Moment, in dem die Daten der Transformationsphase werden auf das Zielsystem hochgeladen.
Es muss darauf geachtet werden, dass, ebenso wie es mehrere Quellsysteme oder Quellen geben kann (wie bereits in früheren Punkten besprochen) es zusätzlich mehrere verschiedene Zielsysteme geben kann.
Arten von Ladesystemen
Einfach, Es gibt zwei Arten von Ladeverfahren:
-
Einfügen. Es ist ein einfaches Akkumulationssystem, das darin besteht, Informationen in großen Datenblöcken zu transportieren, vorher basierend auf der Berechnung von, allgemein, einem Summen- oder Durchschnittswert der betrachteten Größe. Es ist die einfachste und häufigste Methode, einen Ladeprozess durchzuführen, hat aber den Nachteil, dass im Falle eines Unfalls oder Problems (ein Stromausfall, ein Festplattenfehler, etc.) die Konsistenz der Daten verloren geht, Und es kann der Fall auftreten, dass die gesamte Ladung wiederholt werden muss.
-
Ladungen. Unter diesen Umständen, Die Ladung wird gestaffelter und sicherer durchgeführt. Dafür, Das System gruppiert die Informationen automatisch und transparent nach verschiedenen Variablen :, Termine, für eine bestimmte Anzahl von Datensätzen, etc. Dieser Modus ermöglicht es, den genauen Punkt zu verarbeiten, bis zu dem die Ladung durchgeführt wurde, was bedeutet, dass im Falle eines Fehlers, du das Ladeverfahren nur von diesem spezifischen Punkt aus fortsetzen musst, ohne alles noch einmal wiederholen zu müssen.
Hauptunterschiede zwischen Einsätze Ja Ladungen
Die Unterschiede zwischen den beiden Hauptladearten (auch wenn sie nicht die einzigen sind, da es auch Mischsysteme gibt) liegen auf der Ebene der Datenkonsistenz und der Ladezeit.
Bei der Verwendung eines Systems Einfügung das Konsistenzniveau wird reduziert, da ein Fehler eine vollständige Wiederholung des Verfahrens erzwingen kann. Trotz dieses, die Ladedauer ist kürzer.
Das System Ladungen Verlangsamt den Vorgang aufgrund der automatischen Verarbeitung des Ladezustands, gewinnt jedoch im Gegenzug an Daten- und Protokollkonsistenz.
Schlüssel zur Gewährleistung einer korrekten Datenladung
-
Verwenden Sie die geringstmögliche Menge verfügbarer Ressourcen.
-
Stellen Sie so gut wie möglich die Konsistenz der geladenen Daten sicher.
-
Priorisieren Sie die Qualität der Ladung gegenüber der Geschwindigkeit.
-
Versuchen Sie, nicht in andere laufende Prozesse einzugreifen.
Die Wahl der idealen Lademethode hängt vom Einzelfall ab
Die Wahl des Ladeverfahrtyps, Cuya decisión final regularmente corresponde al propietario del procedimiento ETL, debe hacerse después de examinar una serie de parámetros: cantidad de datos a cargar, velocidad que verdaderamente se necesita, etc.
La recomendación general es que si el volumen de datos a cargar es esencial, es recomendable decantarse por un sistema que asegure una mayor consistencia de los datos, evitando así tener que repetir todo el procedimiento ante cualquier eventualidad.
