O AWS Glue anunciou que os usuários podem escolher a versão “Auto” para jobs do Apache Spark. Em seguida, o serviço migra automaticamente o job para o runtime mais recente do Glue, após verificar a compatibilidade e obter consentimento. Antes da mudança, a validação analisa o esquema de saída, o volume de dados, a latência e o formato. Jobs que exigem alterações no código permanecem na versão antiga e recebem uma análise de atualização. O recurso está disponível em todas as regiões comerciais da AWS.
Por que importa
Isso permite que as equipes de dados mantenham os jobs do Spark seguros e rápidos sem gastar semanas em atualizações manuais.
