O que foi anunciado
A AWS expandiu as capacidades dos Notebooks do Amazon SageMaker Unified Studio, adicionando suporte ao Amazon EMR Serverless com Apache Spark Connect. Com essa novidade, engenheiros de dados e analistas ganham mais flexibilidade na escolha do runtime Spark para workloads de analytics interativo e engenharia de dados.
Mais opções de runtime Spark
Antes dessa atualização, o Amazon Athena Spark era a única opção de runtime Spark disponível nos Notebooks do SageMaker Unified Studio. Agora, os usuários podem escolher entre o Athena Spark e o Amazon EMR Serverless, selecionando o motor mais adequado conforme as necessidades de cada projeto.
A seleção do runtime é feita diretamente no painel lateral do Notebook, e a escolha se aplica tanto às células Python quanto às células SQL — mantendo consistência em toda a sessão de trabalho.
O que é possível fazer com o EMR Serverless nos Notebooks
Com essa integração, os usuários podem executar PySpark e Spark SQL diretamente em células de Notebook, conectados a uma aplicação EMR Serverless Spark. Entre os principais benefícios destacados pela AWS, estão:
- SageMaker Data Agent: o assistente de IA integrado ao SageMaker Unified Studio agora pode gerar código e planos de execução a partir de prompts em linguagem natural, acelerando o desenvolvimento de workflows Spark com EMR Serverless.
- Capacidade pré-inicializada: as organizações podem utilizar capacidade pré-inicializada para reduzir o tempo de início das sessões, melhorando a experiência em workloads interativos.
- Monitoramento unificado via Spark UI: a interface de monitoramento do Spark é unificada entre todos os motores suportados, oferecendo visibilidade consistente sobre a execução e o desempenho dos jobs.
- Suporte a conectividade VPC: o EMR Serverless oferece suporte à conectividade via Virtual Private Cloud (VPC) para workloads que exigem isolamento de rede.
Disponibilidade
O recurso está disponível em todas as regiões AWS onde o Amazon SageMaker Unified Studio já opera, com suporte tanto para os Notebooks do SageMaker Unified Studio quanto para o ambiente JupyterLab IDE.
Para começar a usar, a AWS disponibiliza o Guia do Usuário do Amazon SageMaker Unified Studio com as instruções necessárias.
Fonte
Amazon SageMaker Unified Studio Notebooks now support EMR Serverless (https://aws.amazon.com/about-aws/whats-new/2026/06/amazon-sagemaker-unified-studio-emr/)
Leave a Reply