Amazon EMR Serverless ist eine Serverless-Option in Amazon EMR, die es Data Engineers und Datenwissenschaftlern einfach macht, Open-Source-Analyse-Frameworks für Big Data auszuführen, ohne Cluster oder Server konfigurieren, verwalten und skalieren zu müssen. Eine Serverless-EMR-Anwendung verwendet Worker zur Ausführung von Workloads, sodass Benutzer temporären Speicher pro Worker auf der Grundlage der Workload-Anforderungen konfigurieren können. Wir führen heute Shuffle-optimierte Laufwerke auf Amazon EMR Serverless ein. Sie bieten eine höhere Speicherkapazität (bis zu 2 TB) sowie höhere IOPS und somit eine bessere Leistung für I/O-intensive Spark- und Hive-Workloads.
Quelle: aws.amazon.com
Amazon EMR Serverless führt Shuffle-optimierte Laufwerke ein, die eine verbesserte Leistung für I/O-intensive Workloads bieten
Published by