AWS Glue تعلن عن دعم VPC ونقل التصفية إلى المصدر ودعم التقسيم لموصل REST API
تدعم AWS Glue الآن اتصالات VPC ونقل التصفية إلى المصدر ودعم التقسيم لموصل REST API. يتيح لك موصل REST API استيعاب البيانات من أي مصدر يعرض واجهة برمجة التطبيقات المستندة إلى REST، بما في ذلك الأنظمة الخاصة والمنصات الناشئة التي لا تمتلك موصلات أصلية في AWS Glue. مع هذا الإطلاق، يمكنك تشغيل مسارات ETL الخاصة بك من مصادر البيانات باستخدام نقاط نهاية REST API من خلال الاتصال الآمن بنقاط النهاية الخاصة، ونقل البيانات التي تحتاجها فقط، وتنفيذ عمليات القراءة بالتوازي من أجل استيعاب أسرع، كل ذلك دون كتابة تعليمات برمجية مخصصة
مع دعم VPC، يمكنك استخدام موصل REST API للوصول إلى مصادر البيانات المستضافة في الشبكات الفرعية الخاصة أو المتصلة من خلال شبكات VPN أو AWS PrivateLink، دون تعريض حركة المرور للإنترنت العام. يقوم نقل التصفية إلى المصدر بترجمة شروط الاستعلام الخاصة بك إلى معلمات أصلية لواجهة برمجة التطبيقات، لذلك لا تترك المصدر سوى السجلات المطابقة، مما يقلل تكاليف نقل البيانات ويحسن أداء الوظائف. يعمل دعم التقسيم على تقسيم مجموعات البيانات الكبيرة عبر العديد من عمال Spark باستخدام استراتيجيات تعتمد على الحقول أو عدد السجلات، مما يوفر عمليات قراءة متوازية تقلل وقت استيعاب واجهات برمجة التطبيقات ذات الحجم الكبير والمقسمة إلى صفحات.
تتوفر هذه الإمكانات في جميع مناطق AWS التجارية حيث تتوفر AWS Glue.
لبدء الاستخدام، تفضل بزيارة وثائق موصل AWS Glue REST API.