Потоки данных Amazon Kinesis анонсируют управляемые сервисом ключи разделов для упрощения получения данных
Потоки данных Amazon Kinesis теперь поддерживают управляемые сервисом ключи разделов для потоков On-Demand Standard и On-Demand Advantage, автоматически распределяя записи по сегментам без необходимости для клиентов указывать ключи разделов для публикации данных. Эта возможность упрощает получение данных для рабочих нагрузок, не требующих упорядочивания записей, устраняет горячие ключи разделов и сокращает время вывода потоковых рабочих нагрузок в рабочую среду.
Amazon Kinesis Data Streams – это бессерверный сервис потоковой передачи данных, который помогает быстро захватывать, обрабатывать и сохранять потоки данных в любом масштабе. Многие примеры использования потоковой передачи, такие как агрегирование журналов, сбор метрик и телеметрия интернета вещей, не требуют гарантии порядка и позволяют использовать предварительно прогретую емкость для мгновенного масштабирования. Ранее клиенты генерировали случайные ключи разделов (например, UUID) для распределения данных, но случайное разбиение на разделы по-прежнему может приводить к неравномерной пропускной способности между сегментами, вызывая регулирование пропускной способности для некоторых ключей разделов даже при достаточной совокупной пропускной способности потока. При выборе управляемых сервисом ключей разделов клиентам больше не нужно указывать ключи разделов при публикации данных в потоки в режиме «по запросу». Сервис автоматически распределяет записи в зависимости от доступной прогретой емкости, что позволяет клиентам масштабироваться до гигабайт в секунду без поддержки логики распределения. Клиенты, которые хотят отправлять записи без указания ключа раздела, могут просто перейти на последнюю версию пакета SDK AWS или Kinesis Producer Library (KPL), чтобы воспользоваться этой возможностью.
Управляемые сервисом ключи разделов для Потоков данных Amazon Kinesis сегодня доступны во всех коммерческих регионах AWS без дополнительной оплаты. Для начала работы ознакомьтесь с документацией по Потокам данных Amazon Kinesis (https://aws.amazon.com/kinesis).
Все коммерческие регионы AWS