Amazon EMR Managed Scaling unterstützt jetzt Spark-Shuffle-Daten

Amazon EMR Managed Scaling passt die Größe von EMR-Clustern automatisch an, um die beste Leistung und Ressourcenauslastung zu erzielen. Wir freuen uns, heute eine neue Funktion in Managed Scaling ankündigen zu können, die die Herunterskalierung von Instances verhindert, die Shuffle-Zwischendaten für Apache Spark speichern. Die intelligente Herunterskalierung von Clustern ohne die Entfernung von Instances, die Shuffle-Zwischendaten speichern, verhindert erneute Versuche und erneute Berechnungen von Aufträgen, was zu einer besseren Leistung und geringeren Kosten führt.
Quelle: aws.amazon.com