AWS Glue hat angekündigt, dass Nutzer für Apache-Spark-Jobs die Version „Auto“ auswählen können. Der Dienst stellt den Job dann automatisch auf die neueste Glue-Runtime um, nachdem er die Kompatibilität geprüft und die Zustimmung eingeholt hat. Vor dem Wechsel prüft die Validierung Ausgabeschema, Datenvolumen, Latenz und Format. Jobs, für die Codeänderungen nötig sind, bleiben auf der alten Version und erhalten eine Upgrade-Analyse. Die Funktion ist in allen kommerziellen AWS-Regionen verfügbar.
Warum es wichtig ist
Datenteams können Spark-Jobs so sicher und leistungsfähig halten, ohne wochenlang manuelle Upgrades durchführen zu müssen.
