AWS Glue heeft aangekondigd dat gebruikers voor Apache Spark-taken de versie ‘Auto’ kunnen kiezen. De service schakelt de taak vervolgens automatisch over naar de nieuwste Glue-runtime, nadat de compatibiliteit is gecontroleerd en toestemming is verkregen. Voor de overstap wordt de validatie uitgevoerd op basis van het uitvoerschema, de hoeveelheid data, de latentie en het formaat. Taken waarvoor codeaanpassingen nodig zijn, blijven op de oude versie en krijgen een analyse van de benodigde upgrade. De functie is beschikbaar in alle commerciële AWS-regio’s.
Waarom het ertoe doet
Zo kunnen datateams Spark-taken veilig en snel houden zonder weken te besteden aan handmatige upgrades.
