Amazon S3 Connector für PyTorch unterstützt jetzt das Erstellen von Prüfpunkten mit PyTorch Lightning

Der Amazon S3 Connector für PyTorch unterstützt jetzt das direkte Speichern von Prüfpunkten für PyTorch-Lightning-Modelle in Amazon S3, wodurch die Kosteneffizienz und Leistung Ihrer Machine-Learning-Trainingsaufträge gesteigert wird. PyTorch Lightning ist ein Open-Source-Framework, das eine High-Level-Schnittstelle für das Training mit PyTorch bereitstellt. Der Amazon-S3-Connector für PyTorch optimiert automatisch S3-Lese- und Listenanfragen, um das Laden von Daten zu beschleunigen und die Prüfpunkteistung für Ihre Workloads zu erhöhen. Das Speichern von Prüfpunkten für PyTorch-Lightning-Modelle ist mit dem Amazon-S3-Connector für PyTorch bis zu 40 % schneller als das Speichern im Amazon-EC2-Instance-Speicher.
Quelle: aws.amazon.com