AWS Glue Crawlers unterstützt jetzt Apache Iceberg-Tabellen, was die Einführung von AWS Glue Data Catalog als Katalog für Iceberg-Tabellen und die Migration von anderen Iceberg-Katalogen vereinfacht. Apache Iceberg ist ein Open-Source-Tabellenformat für in Data Lakes gespeicherte Daten, das Dateningenieuren hilft, komplexe Herausforderungen zu bewältigen, z. B. die Verwaltung sich ständig weiterentwickelnder Datensätze bei gleichzeitiger Aufrechterhaltung der Abfrageleistung. Mit der heutigen Markteinführung können Sie Iceberg-Tabellen automatisch in Glue Catalog registrieren, indem Sie den Glue Crawler ausführen. Anschließend können Sie Glue Catalog Iceberg-Tabellen über verschiedene Analyse-Engines hinweg abfragen und detaillierte Lake Formation-Berechtigungen anwenden, wenn Sie Abfragen von Amazon Athena aus durchführen.
Quelle: aws.amazon.com
AWS Glue Crawlers unterstützt jetzt Apache Iceberg Tables
Published by