سحابة AWS
سحابة AWS
البدء مع AWS Data Pipeline

AWS Data Pipeline هي خدمة ويب تساعدك على معالجة البيانات ونقلها بشكلٍ موثوق به بين خدمات حوسبة وتخزين AWS المختلفة، بالإضافة إلى مصادر البيانات الداخلية، على فترات زمنية محددة. مع AWS Data Pipeline، يمكنك الوصول إلى بياناتك بشكل منتظم، وذلك حيث يتم تخزينها وتحويلها ومعالجتها بالحجم المناسب، ونقل النتائج بشكل فعَّال إلى خدمات AWS، مثل: Amazon S3 وAmazon RDS وAmazon DynamoDB وAmazon EMR.

تساعدك AWS Data Pipeline على إنشاء أحمال عمل معالجة بيانات معقدة ذات قابلية للتعامل مع الأخطاء وقابلة للتكرار ومتوفرة بدرجة عالية. ليس عليك القلق بشأن التأكد من توافر الموارد، أو إدارة التبعيات المشتركة بين المهام، أو إعادة المحاولة في حالات الفشل المؤقتة، أو المهلات في المهام الفردية، أو إنشاء نظام إخطار بالفشل. تسمح AWS Data Pipeline لك أيضًا بنقل ومعالجة البيانات التي تم قصرها مسبقًا في مخازن البيانات الموجودة في الموقع الخاص بالعمل.

Coursera-reInvent-2
قم بإنشاء ETL الخاص بك من خلال AWS Data Pipeline، وAmazon EMR، وAmazon Redshift (41:11)

موثوق بها

موثوق بها

تم بناء AWS Data Pipeline على بنية تحتية موزعة ومتوفرة بدرجة عالية مصممة من أجل تنفيذ أنشطتك بقابلية للتعامل مع الأخطاء. إذا حدثت الإخفاقات في منطق نشاطك أو مصادر البيانات، تعيد AWS Data Pipeline محاولة النشاط تلقائيًا. إذا استمر الإخفاق، ترسل AWS Data Pipeline إليك إشعارات إخفاق عبر خدمة Amazon Simple Notification Service (Amazon SNS). يمكنك تكوين إشعاراتك من أجل عمليات التشغيل الناجحة أو عمليات تأجيل الأنشطة المخطط لها أو الإخفاقات.

سهل الاستخدام

سهل الاستخدام

إنشاء مسار أمر سريع وسهل عبر وحدة تحكم السحب والإفلات. يتم دمج الشروط المسبقة الشائعة في الخدمة؛ لذا لا تحتاج إلى كتابة منطق إضافي لاستخدامها. على سبيل المثال، يمكنك التحقق من وجود ملف Amazon S3 ببساطة عن طريق تقديم اسم حاوية Amazon S3 ومسار الملف الذي تريد التحقق من أجله، وتقوم AWS Data Pipeline بالباقي. 
تقدِّم خدمة AWS Data Pipeline مكتبة من نماذج المسارات، بالإضافة إلى أداة إنشاء المسارات المرئية السهلة الخاصة بها. تبسِّط هذه النماذج إنشاء المسارات من أجل عدد من حالات الاستخدام الأكثر تعقيدًا، مثل معالجة ملفات السجلات الخاصة بك بانتظام، أو أرشفة البيانات إلى Amazon S3، أو إجراء استعلامات SQL دورية.

المرونة

المرونة

تسمح لك AWS Data Pipeline بالاستفادة من مجموعة متنوعة من الميزات، مثل الجدولة، وتتبع التبعيات، والتعامل مع الأخطاء. يمكنك استخدام الأنشطة والشروط المسبقة التي تقدِّمها AWS و/أو كتابة الأنشطة والشروط المسبقة المخصصة الخاصة بك. يعني هذا أنه يمكنك تكوين AWS Data Pipeline لاتخاذ إجراءات مثل إجراء وظائف Amazon EMR، أو تنفيذ استعلامات SQL مباشرةً مقابل قواعد البيانات، أو تنفيذ التطبيقات المخصصة التي تعمل على Amazon EC2 أو في مركز البيانات الخاص بك. يسمح لك هذا بإنشاء مسارات مخصصة قوية لتحليل بياناتك ومعالجتها دون الاضطرار إلى التعامل مع تعقيدات الجدولة والتنفيذ بموثوقية لمنطق تطبيقك

قابلية التوسع

قابلية التوسع

تسهل AWS Data Pipeline إرسال العمل إلى آلة واحدة أو آلات كثيرة بالتساوي، بشكل متسلسل أو متوازٍ. مع تصميم AWS Data Pipeline المرن، تصبح معالجة مليون ملف بسهولة معالجة ملف واحد.

 

تكلفة منخفضة

تكلفة منخفضة

إن استخدام AWS Data Pipeline غير باهظ التكلفة وتتم الفوترة الخاصة به بسعر شهري منخفض. يمكنك تجربتها مجانًا في ظل AWS مجانية الاستخدام. تعرَّف على المزيد.

الشفافية

الشفافية

لديك تحكم كامل في الموارد الحاسوبية التي تنفذ منطق أعمالك، مما يسهل تعزيز منطقك أو تصحيح أخطائه. بالإضافة إلى ذلك، يتم توصيل سجلات التنفيذ الكامل تلقائيًا إلى Amazon S3، مما يقدِّم لك سجلاً مستمرًا ومفصلاً عما حدث في مسارك.

البدء