Дополнительные преобразования визуального интерфейса ETL и поддержка таблиц S3 в Amazon SageMaker

Проведено: 6 мая 2025 г.

Amazon SageMaker теперь предлагает 14 новых встроенных функций преобразования в визуальном интерфейсе извлечения, преобразования и загрузки (ETL): Format timestamp (Форматирование метки времени), Split string (Разделение строки), Regex extractor (Извлечение регулярных выражений), Autobalance processing (Автобалансировка обработки), UUID (Универсальный уникальный идентификатор), Identifier (Идентификатор), Unpivot columns into rows (Преобразование столбцов в строки), Pivot rows into columns (Преобразование строк в столбцы), Parse JSON column (Анализ столбца JSON), Extract JSON path (Извлечение пути JSON), Lookup (Поиск), Conditional router (Условный маршрутизатор), Route group (Маршрутизация группы) и Order By (Упорядочение по). Новые функции преобразования позволят ETL-разработчикам быстро создавать более сложные конвейеры данных без необходимости писать собственный код для стандартных задач преобразования. Кроме того, реализована поддержка таблиц Amazon S3 через узел хранилища в озере данных Amazon SageMaker. За счет этого разработчики смогут легко получать доступ к данным таблиц S3 и просматривать их на месте.

Визуальный интерфейс ETL в Amazon SageMaker позволяет создавать процедуры ETL с использованием перетаскивания и при поддержке Amazon Q для разработчиков. Каждое из новых преобразований визуального интерфейса ETL решает уникальную задачу обработки данных. Например, преобразование Identifier (Идентификатор) позволяет присвоить числовой идентификатор каждой строке набора данных, Parse JSON column (Анализ столбца JSON) – преобразовать строку JSON в структуру или массив данных, а Extract JSON path (Извлечение пути JSON) – получить путь JSON, который вам необходим.

Эти преобразования визуального интерфейса ETL сейчас доступны во всех регионах AWS, где доступен сервис Amazon SageMaker. Самую актуальную информацию о доступности см. в списке поддерживаемых регионов.

Чтобы узнать больше, ознакомьтесь с документацией Amazon SageMaker.