يتوفر دعم Amazon Data Firehose لتوصيل البيانات إلى جداول Apache Iceberg في مناطق AWS الإضافية

:تاريخ النشر 6 نوفمبر 2024

يتوفر الآن دعم Amazon Data Firehose لتقديم تدفقات بيانات إلى جداول Apache Iceberg في Amazon S3 في جميع مناطق AWS باستثناء مناطق AWS في الصين وAWS GovCloud ومناطق ap-southeast-5.

بفضل هذه الميزة الجديدة، تتكامل إمكانات Firehose مع Apache Iceberg حتى يتمكن العملاء من توصيل تدفقات البيانات مباشرةً إلى جداول Apache Iceberg في مخزن بيانات Amazon S3 الخاص بهم. يمكن لـ Firehose الحصول على تدفقات البيانات من تدفق بيانات Kinesis أو Amazon MSK أو Direct PUT API، وهي مدمجة أيضًا للحصول على التدفقات من خدمات AWS مثل سجلات ACL على الويب AWS WAF، وسجلات Amazon CloudWatch، وسجلات تدفق Amazon VPC، وAWS IOT، وAmazon SNS، وسجلات AWS API Gateway Access، والعديد من السجلات الأخرى المدرجة هنا. يمكن للعملاء بث البيانات من أي من هذه المصادر مباشرةً إلى جداول Apache Iceberg في Amazon S3، وتجنب العمليات متعددة الخطوات. يتوفر Firehose بدون خادم، لذلك يمكن للعملاء ببساطة إعداد البث من خلال تكوين خصائص المصدر والوجهة، والدفع بناءً على وحدات البايت التي تمت معالجتها.

تتيح الميزة الجديدة أيضًا للعملاء توجيه السجلات في تدفق البيانات إلى جداول Apache Iceberg المختلفة استنادًا إلى محتوى السجل الوارد. لتوجيه السجلات إلى جداول مختلفة، يمكن للعملاء تكوين قواعد التوجيه باستخدام تعبيرات JSON. بالإضافة إلى ذلك، يمكن للعملاء تحديد ما إذا كان السجل الوارد يجب أن يطبق عملية تحديث أو حذف على مستوى الصف في جدول Apache Iceberg الوجهة، وأتمتة معالجة سيناريوهات تصحيح البيانات وحق النسيان.

لمعرفة المزيد من المعلومات وبدء الاستخدام، تفضل بزيارة وثائق Amazon Data Firehose، والتسعير ووحدة التحكم.