AWS, der Cloud Leader, richtet seine Datenbank neu auf DataZone und Zero-ETL aus

VentureBeat freut sich, Andrew Brust und Tony Baer als regelmäßige Mitwirkende begrüßen zu dürfen, um unser Engagement für die Bereitstellung modernster Datentechnologie weiter zu verstärken. Achten Sie auf ihre Beiträge in der Datenpipeline.

Der Einfluss des Cloud-Führers AWS auf IT-Trends nimmt viele Formen an, aber keine war wirkungsvoller als seine stabilen Datenbankdienste.

Auf den meisten der jährlichen re:Invent-Konferenzen führte AWS eine glänzende neue Datenbank ein, die die Präsenz des Unternehmens unter den Cloud-basierten Datenbanken bestätigt. Diese waren manchmal Open Source und oft speziell entwickelt.

Aber dieses Jahr war es anders. Auf der AWS re:Invent 2022 wandte sich das Unternehmen der Verbesserung des Geschmacks seiner bestehenden Suite von Cloud-Datentools für Enterprise Computing zu. Dies bedeutet, dass der Datenintegration und -verwaltung jetzt besondere Aufmerksamkeit geschenkt werden muss.

Zu diesem Zweck führte das Unternehmen Amazon DataZone-Datenverwaltungsdienste ein, um Daten zu katalogisieren und zu verwalten, die in der AWS-Cloud und lokal gespeichert sind. Darüber hinaus könnte DataZone Drittanbieterquellen über APIs unterstützen, sagte AWS und berief sich in diesem Zusammenhang auf die Partner DataBricks, Snowflake und Tableau.

Vorfall

Smart Security Summit auf Abruf

Erfahren Sie mehr über die wesentliche Rolle von KI und ML in der Cybersicherheit und branchenspezifische Fallstudien. Sehen Sie sich noch heute die On-Demand-Sitzungen an.

Schau hier

Das Timing ist richtig. Unternehmen stellen fest, dass die Anzahl der verschiedenen Datenquellen, die sie kombinieren müssen, dramatisch zunimmt. Die Verwaltung und Steuerung spärlicher Datenbanken wird lästig.

Kombinieren Sie Datenströme

Nach wie vor treibt die Rentabilität das Computing in die Cloud, sagte AWS-CEO Adam Selipsky gegenüber den re:Invent-Teilnehmern. Für AWS beginnen profitable Daten-Engines heute mit Aurora, der Open-Source-AWS-Version von PostgreSQL, und Redshift, dem säulenförmigen MPP-Data Warehouse, das mit seiner Einführung im Jahr 2012 die Wirtschaftlichkeit der Datenanalyse auf den Kopf gestellt hat.

Zu dem Datenbankkorps, das Aurora und Redshift brachte, gehörten auch RDS, Neptune, DynamoDB, DocumentDB, Elastic Cache, TimeStream und die Quantum Ledger-Datenbank. -Quellenlizenz.

Selipsky kam nicht zu re:Invent, um für eine neue Datenbank zu werben - obwohl es Updates für mehrere bestehende Engines gab. Stattdessen förderte er die Idee, das bestehende Portfolio effektiver zu binden.

"All diese Tools zum Speichern und Analysieren von Daten zu haben, zeigt die nächste Herausforderung, vor der die Menschen stehen ... Sie müssen in der Lage sein, Informationen über diese verschiedenen Data-Mining-Methoden hinweg zu kombinieren, um ein Gesamtbild zu erhalten und wirklich Informationen zu erhalten", sagte er.

Gib ihnen ETL

In seiner re:Invent-Keynote konzentrierte sich Selipsky auf Integrationsherausforderungen rund um ETL (Extract Transform Load), den seit langem schwelenden Hightech-Rückstau, den Innovatoren kürzlich wieder aufgegriffen haben.

Er kündigte neue Integrationen an, die die Notwendigkeit von ETL zwischen Amazon Aurora- und Amazon Redshift-Diensten sowie zwischen Spark und Redshift eliminieren sollen.

Selipskys Ziel hier ist klar. Mit dem Aufkommen von Low-Code/No-Code könnte es an der Zeit sein, zu „Zero ETL“ überzugehen. Es ist ein Schritt in der Datenverarbeitung, der viele sich wiederholende benutzerdefinierte Skripte umfasst, der notwendig ist und normalerweise ignoriert wird, wenn die digitale Transformation das ultimative Geschäftsziel ist.

Die mühsame Arbeit der Vorbereitung von ETL-Daten kann dem Fortschritt im Wege stehen. Um die Frustration der IT über den Prozess zu zeigen, las Selipsky einen Auszug aus einem Brief eines Kunden vor, in dem ETL als „undankbares und nicht nachhaltiges schwarzes Loch“ beschrieben wurde. Neue Aurora- und Redshift-Funktionen helfen Kunden, sich auf AWS in eine Zukunft ohne ETL zu bewegen, sagte er.

Tableau-Echos

Obwohl vielleicht überschattet von