Suporte ao AWS Glue 5.1 no SageMaker Unified Studio
A AWS anunciou a integração do AWS Glue 5.1 ao Amazon SageMaker Unified Studio, expandindo as possibilidades de processamento de dados para engenheiros e cientistas de dados. Com esta atualização, os usuários podem agora trabalhar com jobs de processamento de dados em três modalidades: Visual ETL (Extração, Transformação e Carregamento), notebooks e jobs baseados em código.
Capacidades Técnicas Aprimoradas
A inclusão do AWS Glue 5.1 traz melhorias significativas ao ambiente de processamento. Os usuários podem executar jobs sobre o Apache Spark 3.5.6 com suporte a Python 3.11 e Scala 2.12.18, garantindo compatibilidade com versões recentes das linguagens de programação mais utilizadas em ciência de dados.
Além disso, a atualização incorpora bibliotecas atualizadas para formatos de tabelas abertas, que são padrões importantes no ecossistema de dados modernos. A integração inclui:
- Apache Iceberg 1.10.0
- Apache Hudi 1.0.2
- Delta Lake 3.3.2
Como Utilizar o AWS Glue 5.1
A implementação é direta e acessível aos usuários. Ao criar jobs de processamento de dados no SageMaker Unified Studio, é necessário selecionar a versão Glue 5.1 através do menu suspenso de versões nas configurações do job. Este procedimento se aplica uniformemente a todos os tipos de jobs: Visual ETL, notebooks e jobs baseados em código, permitindo que os times aproveitem o runtime Spark mais atual e as bibliotecas de formatos de tabelas abertas em todos os seus fluxos de trabalho de processamento.
Disponibilidade e Próximos Passos
O AWS Glue 5.1 no Amazon SageMaker Unified Studio está disponível em todas as regiões onde o serviço SageMaker Unified Studio é oferecido. Para conhecer os detalhes completos sobre implementação, consulte a documentação do Amazon SageMaker Unified Studio. Informações técnicas adicionais sobre o AWS Glue 5.1, incluindo detalhes sobre suporte a formatos de tabelas abertas e capacidades de controle de acesso, estão disponíveis na documentação do AWS Glue.
Fonte
Amazon SageMaker Unified Studio now supports AWS Glue 5.1 for data processing jobs (https://aws.amazon.com/about-aws/whats-new/2026/03/amazon-sagemaker-unified-studio-aws-glue-5-1/)
Leave a Reply