Vielleicht haben Sie die bemerkenswerte Szene von “I Love Lucy” gesehen, in der Lucy und Ethel in der Nähe einer Süßwarenfabrik mit Schokolade landen. Die schnelle Transportlinie brennt, und die Frauen sind prompt aus ihrer Tiefgründigkeit heraus. Noch bevor die Szene zu Ende ist, stopfen sie ihre Mützen, Taschen und Münder voller Schokolade, während eine sich ständig ausdehnende Parade von ausgepackten Desserts sich immer weiter von ihrer Station entfernt. Es ist schon komisch. Es ist ebenso die ideale Einfachheit, um die Größe der fortgeschrittenen Informations-Pipeline zu verstehen.

Die effektive Weitergabe von Informationen von einem Bereich zum nächsten – beispielsweise von einer SaaS-Anwendung zu einem Informationsverteilungszentrum – ist eine der grundlegendsten Aktivitäten im gegenwärtigen informationsgesteuerten Unternehmen. Alles in allem kann eine hilfreiche Prüfung erst beginnen, wenn die Informationen zugänglich sind. Der Informationsfluss kann problematisch sein, wenn man bedenkt, dass es so viele Dinge gibt, die sich während des Transports von einem Framework zum nächsten schlecht entwickeln können: Informationen können verunreinigt werden, sie können auf Engpässe stoßen (wodurch sie ruhend werden), oder Informationsquellen können sich streiten und auch Kopien produzieren. In dem Maße, wie die Komplexität der Notwendigkeiten zunimmt und die Menge der Informationsquellen sich verdoppelt, nehmen diese Probleme an Umfang und Wirkung zu.

Die Informationspipeline: für die Kompetenz gearbeitet

Geben Sie die Informationspipeline ein, eine Programmierung, die zahlreiche manuelle Schritte des Verfahrens überflüssig macht und einen reibungslosen, robotergestützten Informationsfluss von einer Station zur nächsten ermöglicht. Es beginnt mit der Charakterisierung, was, wo und wie Informationen gesammelt werden. Sie mechanisiert die Verfahren, die mit dem Trennen, Ändern, Konsolidieren, Genehmigen und Stapeln von Informationen zur weiteren Untersuchung und Wahrnehmung verbunden sind. Sie gibt die Anfangs- bis Endgeschwindigkeit vor, indem sie auf Fehler verzichtet und Engpässe oder Müßiggang bekämpft. Es kann zahlreiche Informationsströme sofort verarbeiten. Daher ist sie für das gegenwärtige informationsgesteuerte Unterfangen absolut notwendig.

Wie kann eine Informationspipeline nicht ganz dasselbe sein wie ETL?

Gewöhnlich hören Sie die Begriffe ETL und Informationspipeline, die wechselseitig verwendet werden. ETL steht für “Concentrate, Change, and Burden” (Konzentration, Veränderung und Belastung). ETL-Rahmenwerke ziehen Informationen aus einem Rahmenwerk heraus, ändern die Informationen und belasten die Informationen in einer Datenbank oder einem Informationsverteilungszentrum. Heritage-ETL-Pipelines laufen normalerweise in Bündeln, was bedeutet, dass die Informationen zu einem bestimmten Zeitpunkt in einem enormen Klumpen in den objektiven Rahmen übertragen werden. Üblicherweise geschieht dies in den üblichen gebuchten Zwischenzeiten; Sie können die Bündel beispielsweise so gestalten, dass sie konsequent um 12:30 Uhr laufen, wenn der Verkehr im Rahmenwerk gering ist.

Paradoxerweise ist “Informationspipeline” ein umfassenderer Begriff, der ETL als Teilmenge einschließt. Er spielt auf ein Rahmenwerk an, mit dem Informationen von einem Rahmenwerk auf das nächste übertragen werden können. Die Informationen können möglicherweise geändert werden, und sie werden eher progressiv (oder sprudelnd) als gebündelt behandelt. An dem Punkt, an dem die Informationen ausströmen, werden sie in einem ununterbrochenen Strom verarbeitet, was für Informationen hilfreich ist, die eine ständige Auffrischung erfordern, z.B. Informationen von einem Sensor, der den Verkehr beobachtet. Außerdem dürfen die Informationen nicht in einer Datenbank oder einem Informationslager gestapelt werden. Sie können zu einer beliebigen Anzahl von Zielen gestapelt werden, z.B. zu einem AWS-Eimer oder einem Informationssee, oder sie können in erheblichem Maße einen Webhook auf einem anderen Framework auslösen, um einen bestimmten Geschäftsprozess zu starten.

Wer braucht eine Informationspipeline?

Obwohl eine Informationspipeline nicht für jedes Unternehmen notwendig ist, ist diese Neuerung besonders für jene Unternehmen nützlich, die dies wünschen:

Große Summen oder zahlreiche Informationsquellen schaffen, von ihnen abhängen oder sie speichern

Halten Sie die Informationsquellen in Silos

Ständige oder ausnahmsweise verfeinerte Informationsprüfung erfordern

Informationen in der Wolke speichern

Wenn Sie die obige Auflistung überprüfen, würde die überwiegende Mehrheit der Organisationen, mit denen Sie ständig in Verbindung stehen – und wahrscheinlich auch Ihre eigenen – von einer Informationspipeline profitieren.

Arten von Informationspipeline-Vereinbarungen

Es sind verschiedene Informationspipeline-Vereinbarungen zugänglich, und jede ist für verschiedene Zwecke geeignet. So sollten Sie beispielsweise für den Fall, dass Sie versuchen, Ihre Informationen in die Wolke zu verlagern, Cloud-lokale Geräte verwenden.

Der beiliegende Rundown zeigt die bekanntesten Arten von Pipelines, die zugänglich sind. Beachten Sie, dass diese Rahmenwerke nicht grundlegend voneinander unabhängig sind. Sie können zum Beispiel eine Informationspipeline haben, die sowohl für Cloud als auch für Continuous fortgeschritten ist.

Bündel. Die Vorbereitung von Büscheln ist im Allgemeinen hilfreich, wenn Sie enorme Informationsmengen in einer normalen Zwischenzeit bewegen müssen und Sie nicht ständig Informationen bewegen müssen. Sie kann zum Beispiel wertvoll sein, um Ihre Werbeinformationen in einen größeren Untersuchungsrahmen einzubinden.

Konstant. Diese Apparate werden ständig aufgerüstet, um Informationen zu verarbeiten. Kontinuierlich ist hilfreich, wenn Sie Informationen aus einer überlaufenden Quelle verarbeiten, z.B. die Informationen von Geldmärkten oder Telemetrie von zugehörigen Geräten.

Wolke lokal. Diese Geräte werden aufgerüstet, um mit cloud-basierten Informationen, z.B. Informationen aus AWS-Eimern, zu arbeiten. Diese Geräte werden in der Cloud unterstützt, so dass Sie ein gutes Geschäft mit Rahmen- und Master-Assets machen können, da Sie sich darauf verlassen können, dass die Grundlage und die Beherrschung des Händlers Ihre Pipeline erleichtert.

Quelloffen. Diese Instrumente sind am wertvollsten, wenn Sie im Gegensatz zu einem Geschäftsverkäufer eine Option mit minimalem Aufwand benötigen und die Fähigkeit besitzen, den Apparat für Ihre Motivationen zu schaffen oder zu erweitern. Open-Source-Instrumente sind häufig kostengünstiger als ihre Geschäftspartner, erwarten jedoch, dass die Meisterschaft den Nutzen angesichts der Tatsache nutzt, dass die grundlegende Innovation frei zugänglich ist und von den Kunden verändert oder erreicht werden soll.

Der erste Steigbügel

Sie sind also davon überzeugt, dass Ihr Unternehmen eine Informations-Pipeline benötigt. Wie würden Sie beginnen?

Sie könnten eine Gruppe damit beauftragen, Ihre eigene Informationspipeline intern aufzubauen und zu unterhalten. Dazu gehört Folgendes:

Aufbau eines Screening-Ansatzes für die Annäherung an Informationen (unabhängig davon, ob dokumentenbasiert, sprudelnd oder etwas anderes)

Zusammenwirken mit und Ändern von Informationen aus jeder Quelle, um die Organisation und den Entwurf ihres Ziels zu koordinieren

Verlagerung der Informationen in die objektive Datenbank/Informationsbibliothek

Einfügen und Löschen von Feldern und Modifizieren der Gliederung, wenn sich die Organisationsvoraussetzungen ändern

Eine kontinuierliche, fortwährende Pflicht zur Aufrechterhaltung und Verbesserung der Informationspipeline

Es kommt darauf an, dass das Verfahren exorbitant ist, sowohl was das Vermögen als auch die Zeit betrifft. Sie benötigen erfahrene (und auf diese Weise kostspielige) Arbeitskräfte, die entweder unter Vertrag genommen oder vorbereitet und von anderen hochrangigen Aktivitäten und Projekten abgezogen werden. Die Herstellung könnte lange dauern, was kritische Kosten für die offene Tür mit sich bringen würde. Schließlich kann es sehr wohl schwierig sein, diese Art von Vorkehrungen in einem angemessenen Verhältnis zu treffen, da Sie Ausrüstung und Personen mit einbeziehen müssen, die möglicherweise nicht im Ausgabenplan enthalten sind.

Eine weniger komplexe, praktischere Anordnung ist es, Ressourcen in eine starke Informationspipeline zu stecken, zum Beispiel in Alooma. Hier ist der Grund dafür:

Sie erhalten schnell Wertschätzung aus dem Container heraus, was Ihnen die Vorlaufzeit erspart, die mit dem Aufbau einer internen Vereinbarung verbunden ist.

Sie müssen keine Vermögenswerte aus bestehenden Unternehmen oder Posten abziehen, um Ihre Informationspipeline zusammenzustellen oder aufrechtzuerhalten.

Für den Fall, dass oder wenn Probleme auftauchen, haben Sie jemanden, dem Sie vertrauen können, um das Problem zu beheben, anstatt Vermögenswerte aus verschiedenen Aktivitäten abzuziehen oder die Einhaltung einer SLA zu vernachlässigen.

Es bietet Ihnen die Möglichkeit, Ihre Informationen im Handumdrehen herunterzuspülen und zu verbessern.

Es ermöglicht eine fortlaufende, sichere Prüfung von Informationen, sogar aus verschiedenen Quellen gleichzeitig, indem die Informationen in einem Informationsverteilungszentrum in der Wolke abgelegt werden.

Sie können Informationen bewegend darstellen

Die Sicherheit für große Unternehmen und eine 100%ige SOC 2 Sort II, HIPAA und GDPR-Konsistenz sorgen für große Gelassenheit.

Änderungen am Entwurf und neue Informationsquellen werden effektiv konsolidiert

Der Umgang mit Fehlern impliziert, dass Informationen nicht verloren gehen, wenn die Stapelung zu kurz kommt