Качество данных AWS Glue предоставляет рекомендации по правилам с учетом контекста за считаные секунды
Теперь Качество данных AWS Glue генерирует правила качества данных за считаные секунды, ускоряя проверку качества данных таблиц в Каталоге данных AWS Glue. Вы получаете готовый к использованию набор правил с полным охватом каждого столбца без ручной настройки, что позволяет быстрее переходить от необработанных к достоверным данным при разработке конвейеров.
Это достигается благодаря новому расширенному режиму рекомендаций по правилам, в котором Качество данных AWS Glue использует генеративный искусственный интеллект для определения назначения ваших данных и предлагает актуальные для бизнеса правила, отражающие то, как используются данные. Этот расширенный режим можно использовать для начальной подготовки правил для недавно добавленного набора данных или проведения базовых проверок в большом озере данных без необходимости определять каждое правило вручную. Вы просматриваете рекомендуемые правила, вносите необходимые изменения и сохраняете их в виде набора правил, чтобы немедленно начать мониторинг.
Расширенный режим доступен в следующих регионах AWS: Азиатско-Тихоокеанский регион (Мельбурн, Осака, Сидней, Токио), Канада (Центральная), Европа (Ирландия, Испания, Лондон, Милан, Париж, Стокгольм, Франкфурт, Цюрих), Восток США (Огайо, Северная Вирджиния) и Запад США (Орегон, Северная Калифорния).
Для начала работы ознакомьтесь с документацией по функции «Качество данных AWS Glue».