استيعاب البيانات باستخدام Amazon Kinesis Data Firehose

باستخدام Amazon Kinesis Firehose، تستطيع بسهولة تحويل بيانات التدفق الخام من مصادر بياناتك إلى التنسيقات التي يطلبها فهرس Elasticsearch أو OpenSearch لديك وتحميلها إلى Amazon OpenSearch Service دون الاضطرار إلى بناء مسارات خاصة بك لمعالجة البيانات.

لاستخدام هذه الميزة، ما عليك سوى تحديد إحدى وظائف AWS Lambda من علامة تبويب تكوين توصيل التدفق لـ Amazon Kinesis Firehose في وحدة إدارة تحكم AWS. سيقوم Amazon Kinesis Firehose تلقائيًا بتطبيق وظيفة AWS Lambda على كل سجل من سجلات بيانات الإدخال وتحميل البيانات المحوَّلة إلى فهرس Amazon OpenSearch Service الخاص بك.

يوفر Amazon Kinesis Firehose مقايسات Lambda مُعدة مسبقًا يمكن استخدامها دون إجراء أي تغيير عليها أو تخصيص لها من أجل تحويل مصادر البيانات الشائعة مثل سجلات Apache وسجلات النظام إلى تنسيقات JSON وCSV. يمكنك أيضًا تهيئة Amazon Kinesis Firehose لإعادة محاولة أداء المهام الفاشلة تلقائيًا ونسخ بيانات التدفق الخام احتياطيًا. تعلّم أكثر »

 

استيعاب البيانات باستخدام Logstash

تدعم Amazon OpenSearch Service التكامل مع Logstash، وهي أداة لمعالجة البيانات المفتوحة المصدر تجمع البيانات من المصادر وتحوِّلها ثم تحمِّلها إلى Elasticsearch أو OpenSearch. يمكنك بسهولة نشر Logstash على Amazon EC2 وإعداد نطاق لـ Amazon OpenSearch Service خاص بك كمخزن خلفي لجميع السجلات التي تمر أثناء قيامك بتنفيذ Logstash. تدعم Logstash مكتبة من الفلاتر المعّدة مسبقًا لإجراء عمليات التحويل المشتركة بسهولة مثل تحليل بيانات السجلات غير المهيكلة وتحويلها إلى بيانات مهيكلة من خلال مطابقة الأنماط وإعادة تسمية الحقول الموجودة في سجلات البيانات لديك وحذفها واستبدالها وتعديلها، فضلاً عن تجميع المقاييس. تعلّم أكثر »

استيعاب البيانات باستخدام Amazon Cloudwatch Logs

يتيح لك Amazon CloudWatch Logs مراقبة الأنظمة والتطبيقات واستكشاف الأخطاء وإصلاحها باستخدام ملفات سجل نظامك وتطبيقك الحالي، وملفات السجل المخصصة. يمكنك تهيئة مجموعة سجلات CloudWatch لدفق البيانات إلى نطاق Amazon OpenSearch Service الخاص بك في وقت شبه فعلي من خلال الاشتراك في CloudWatch Logs. هذا التكامل مناسب إذا كنت تستخدم بالفعل Cloudwatch Logs في جمع بيانات السجلات وترغب في مشاركة هذه البيانات مع مستخدمي Amazon OpenSearch Service. تعلّم أكثر »

استيعاب البيانات باستخدام AWS IoT

AWS IoT عبارة عن منصة سحابة مدارة تسمح للأجهزة المتصلة بالتفاعل بسهولة وأمان مع تطبيقات السحاب والأجهزة الأخرى. باستخدام AWS IoT، يمكنك التقاط البيانات من الأجهزة المتصلة مثل الأجهزة الاستهلاكية والمستشعرات المدمجة وصناديق التلفاز العلوية. باستخدام وحدة إدارة تحكم AWS، يمكنك تهيئة AWS IoT لتحميل البيانات مباشرة إلى Amazon OpenSearch Service، مما يتيح لك تزويد عملائك بوصول شبه فوري إلى بيانات IoT ومقاييسه. تعلّم أكثر »

كيفية اختيار آلية الاستيعاب الصحيحة

يعتمد اختيار آلية الاستيعاب الصحيحة على متطلبات حالة الاستخدام لديك، مثل زمن انتقال البيانات ونوع البيانات. بالنسبة للأحجام الكبيرة من البيانات، فإننا نوصي باستخدام Amazon Kinesis Data Firehose، وهي خدمة مدارة بالكامل وقابلة للتوسع تلقائيًا لمطابقة إنتاجية بياناتك، ولا تتطلب أي إدارة مستمرة. يمكنها أيضًا تحويل البيانات وضغطها وجعلها دفعات قبل تحميلها إلى نطاق Amazon OpenSearch Service. غالبًا ما يعتمد الاختيار أيضًا على الخدمات التي تستخدمها بالفعل. على سبيل المثال، إذا كنت تقوم بالفعل بجمع سجلات التطبيقات باستخدام Amazon CloudWatch Logs، فيمكنك ببساطة تحميل هذه البيانات إلى نطاق Amazon OpenSearch Service الخاص بك دون بذل جهد إضافي كبير.

الخطوات القادمة

تعلّم أكثر عن تسعير Amazon OpenSearch Service

زر صفحة التسعير
هل أنت جاهز للإنشاء؟
ابدأ باستخدام Amazon OpenSearch Service
هل لديك مزيد من الأسئلة؟
اتصل بنا