Unterstützung von Apache Spark 2.2.1 mit Integration von Amazon SageMaker und Apache Hive 2.3.2 auf Amazon EMR Version 5.11.0

Sie können jetzt Apache Spark 2.2.1, Apache Hive 2.3.2 und die Amazon SageMaker-Integration mit Apache Spark auf Amazon EMR Version 5.11.0 verwenden. Spark 2.2.1 und Hive 2.3.2 enthalten mehrere Fehlerkorrekturen und Verbesserungen. Amazon SageMaker Spark ist eine als Open Source bereitgestellte Spark-Bibliothek für Amazon SageMaker, einen vollständig verwalteten Service, der Machine Learning-Modelle jeder Größenordnung erstellen zu trainieren und bereitstellen kann. Sie ermöglicht Ihnen, Spark-Stufen und Stufen, die mit Amazon SageMaker interagieren, in Ihren Spark ML Pipelines überlappend zuzulassen, sodass Sie Modelle mit Spark DataFrames in Amazon SageMaker mit von Amazon bereitgestellten ML-Algorithmen trainieren können, wie beispielsweise K-Means-Clustering oder XGBoost.
Quelle: aws.amazon.com