Annonce des améliorations apportées à Data Quality Definition Language (DQDL) pour AWS Glue Data Quality
Les clients utilisent AWS Glue Data Quality, une fonctionnalité d'AWS Glue, pour mesurer et contrôler la qualité de leurs données. Ils élaborent des règles de qualité des données à l'aide de la DQDL pour garantir l'exactitude de leurs données. Les clients doivent pouvoir créer des règles pour des scénarios métier complexes, notamment des conditions de filtrage, des conditions d'exclusion, des validations pour les valeurs vides et des règles composites. Auparavant, les clients créaient du code SQL pour effectuer ces validations de la qualité des données dans le type de règle CustomSQL. AWS Glue annonce aujourd'hui une série de nouvelles améliorations apportées à DQDL, qui permettent aux ingénieurs de données de créer facilement des règles de qualité des données complexes à l'aide de types de règles natifs. DQDL prend désormais en charge
- L'opérateur NOT qui permet aux clients d'exclure certaines valeurs de leur règle
- De nouveaux mots clés tels que NULL, EMPTY et WHITESPACES_ONLY pour créer des règles qui capturent les valeurs manquantes sans expressions régulières complexes
- Des règles composites permettant aux clients de créer des règles métier sophistiquées, ce qui leur permet désormais de spécifier des options pour gérer l'ordre d'évaluation de ces règles
- La clause WHERE dans DQDL pour filtrer les données avant d'appliquer des règles.
Reportez-vous au guide de DQDL pour en savoir plus.
AWS Glue Data Quality est disponible dans toutes les régions commerciales où AWS Glue est disponible. Pour en savoir plus, consultez la page produit AWS Glue et notre documentation.