AWS Glue Data Quality agora suporta detecção de anomalias e gravação de resultados no AWS Glue Data Catalog

O que foi anunciado

A AWS anunciou duas novas capacidades para o AWS Glue Data Quality: suporte à detecção de anomalias em avaliações baseadas no Catálogo (GDC) e a possibilidade de gravar os resultados das avaliações diretamente em tabelas do AWS Glue Data Catalog. Ambas as funcionalidades funcionam tanto em jobs de ETL (Extração, Transformação e Carga) quanto em avaliações diretas no Catálogo, garantindo uma experiência consistente de qualidade de dados independentemente do tipo de fluxo de trabalho utilizado.

Detecção de anomalias com Machine Learning

Com o suporte à detecção de anomalias para tabelas do GDC, a AWS permite identificar mudanças inesperadas nas estatísticas dos dados — como quedas repentinas em valores distintos ou picos no número de linhas — sem a necessidade de escrever regras com limites explícitos. O mecanismo usa previsão de séries temporais com ML (Machine Learning) para detectar esses desvios automaticamente.

Essa capacidade é especialmente útil para engenheiros de dados que monitoram centenas de tabelas no GDC e precisam que problemas sejam identificados de forma automática, sem intervenção manual constante.

Gravação de resultados no Glue Data Catalog

A segunda novidade é a capacidade de armazenar os resultados das avaliações diretamente em tabelas do GDC. Isso inclui:

• Resultados das regras de qualidade de dados
• Métricas de profiling (perfilamento dos dados)
• Previsões de anomalias com intervalos de confiança

Com isso, cria-se um histórico consultável de todas as avaliações de qualidade realizadas. Independentemente de a avaliação ter sido executada em um job ETL ou diretamente em uma tabela do Catálogo, os resultados podem ser consultados a qualquer momento usando SQL padrão.

Disponibilidade

As funcionalidades de detecção de anomalias e armazenamento de resultados no GDC estão disponíveis em todas as regiões comerciais da AWS e nas regiões do AWS GovCloud (US). Para começar a usar, a AWS disponibiliza a documentação oficial do AWS Glue Data Quality.

Fonte

AWS Glue Data Quality now supports anomaly detection and writing results to the AWS Glue Data Catalog (https://aws.amazon.com/about-aws/whats-new/2026/07/aws-glue-data-quality-catalog-anomaly-detection-write-results)