AWS Glue объявила, что для заданий Apache Spark можно выбрать версию «Auto». Сервис проверит совместимость и запросит согласие, после чего автоматически переведёт задание на новейшую среду выполнения Glue. Перед обновлением проверяются схема выходных данных, объём данных, задержка и формат. Задания, для которых требуется изменить код, останутся на прежней версии; для них будет подготовлен анализ обновления. Функция доступна во всех коммерческих регионах AWS.
Почему это важно
Команды, работающие с данными, смогут поддерживать безопасность и высокую производительность заданий Spark, не тратя недели на обновления вручную.