يدعم Amazon Data Firehose النسخ المستمر لتغييرات قاعدة البيانات على جداول Apache Iceberg في Amazon S3

:تاريخ النشر 15 نوفمبر 2024

يتيح Amazon Data Firehose الآن التقاط وتكرار تغييرات قاعدة البيانات على جداول Apache Iceberg في Amazon S3 (معاينة). تتيح هذه الميزة الجديدة للعملاء بث البيانات في الوقت الفعلي بسهولة من قواعد بيانات MySQL وPostgreSQL مباشرة إلى جداول Apache Iceberg.

Firehose هي خدمة بث مُدارة بالكامل بلا خادم تمكّن العملاء من التقاط تدفقات البيانات وتحويلها وتسليمها إلى Amazon S3 وAmazon Redshift وOpenSearch وSplunk وSnowflake ووجهات أخرى للتحليلات. باستخدام هذه الوظيفة، يقوم Firehose بإجراء نسخة أولية كاملة من البيانات من جداول قاعدة البيانات المحددة، ثم يقوم باستمرار ببث تحديثات Change Data Capture (CDC) لتعكس الإدخالات والتحديثات والحذف في جداول Apache Iceberg. يعمل هذا الحل المبسط على التخلص من إعدادات خطوط أنابيب البيانات المعقدة مع تقليل التأثير على أداء معاملات قاعدة البيانات.
تشمل الإمكانات الرئيسية ما يلي: • الإنشاء التلقائي لجداول Apache Iceberg التي تطابق مخططات قاعدة بيانات المصدر • التطور التلقائي للمخطط استجابةً لتغييرات المصدر • النسخ الانتقائي لقواعد بيانات وجداول وأعمدة محددة

تتوفر ميزة المعاينة هذه في جميع مناطق AWS باستثناء الصين ومناطق AWS GovCloud (الولايات المتحدة) وآسيا والمحيط الهادئ (ماليزيا). للاطلاع على الشروط والأحكام، راجع المشاركة في خدمة Beta في شروط خدمات AWS.

للبدء، تفضل بزيارة وثائق Amazon Data Firehose ووحدة التحكم.

لمعرفة المزيد حول هذه الميزة، تفضل بزيارة منشور مدونة AWS هذا.