Возможности сервиса Amazon AppFlow

Используя сервис Amazon AppFlow, можно настраивать потоки данных в считанные минуты без необходимости создавать коды. Используя интуитивно понятный пользовательский интерфейс, вы можете выбрать источники и места назначения данных; настроить дополнительные преобразования, фильтры и проверки; и запустить свой поток, не прибегая к помощи технических специалистов.

Amazon AppFlow помогает запускать потоки данных по требованию для выполнения массовых переносов или установить обычное расписание для синхронизации данных. Потоки данных выполняются в ответ на бизнес-события, такие как создание возможности продажи, изменение статуса заявки в службу поддержки или заполнение регистрационной формы.

Amazon AppFlow включает встроенную интеграцию с приложениями «программное обеспечение как услуга» (SaaS), которые ежедневно используются для ведения бизнеса, включая Salesforce, SAP, Google Analytics и Facebook Ads, а также запланированы дополнительные интеграции. Используя сервис Amazon AppFlow, можно легко передавать данные из любого поддерживаемого приложения SaaS с помощью всего нескольких щелчков мыши.

Вы можете использовать Amazon AppFlow для сопоставления полей источника и назначения с помощью массового или индивидуального сопоставления полей, а также с помощью CSV-файла. Amazon AppFlow помогает выполнять такие преобразования данных, как объединение, маскирование, фильтрация и валидация. К примеру, можно проверить правильность числового формата данных, объединить имена и фамилии или выполнить маскирование реквизитов кредитной карты.

Amazon AppFlow разделяет данные по схемам объектов источника, когда в качестве места назначения выбран сервис Amazon Simple Storage Service (S3). Разделение данных улучшает компоновку данных для эффективного выполнения запросов аналитическими системами, такими как Amazon Athena и Amazon Redshift Spectrum. Данные организуются в иерархическую структуру разделов на основе выбранных вами полей назначения.

Запросы также выполняются более эффективно, если сканирование данных может быть распараллелено, а блоки данных могут быть прочитаны последовательно. Amazon AppFlow помогает объединять записи в файлы, размер которых соответствует заданному вами размеру. Это помогает снизить накладные расходы на обработку и улучшить параллелизм.

Amazon AppFlow автоматизирует подготовку и регистрацию ваших данных в Каталоге данных AWS Glue всего за несколько шагов. Обмен, обнаружение и доступ к данным из растущей библиотеки Amazon AppFlow, включающей более 50 коннекторов SaaS, с сервисами аналитики и машинного обучения AWS, такими как AWS Glue, Amazon Athena и Amazon SageMaker Data Wrangler.

Пакет средств разработки ПО коннекторов Amazon AppFlow позволяет создавать собственные коннекторы для безопасной передачи данных между вашими пользовательскими конечными точками, приложениями или другими облачными сервисами в библиотеку управляемых коннекторов Amazon AppFlow для SaaS и AWS и обратно. Разрабатывайте и тестируйте коннекторы с помощью того же SDK с открытым исходным кодом, который используется внутренними командами AWS. Запустите свой собственный коннектор уже сегодня, который доступен на Java и Python.