AWS Lake Formation

بناء مخزن بيانات آمن في أيام

AWS Lake Formation هي خدمة تسهّل إعداد مخزن بيانات آمن خلال أيام. مخزن البيانات هو مستودع مؤمن ومنسق ومركزي يخزن كافة بياناتك، سواءً في شكلها الأصلي والمعدة للتحليل. يمكّنك مخزن البيانات من تقسيم مستودعات البيانات وجمع أنواع مختلفة من التحليلات للحصول على الرؤى وتوجيه اتخاذ قرارات أعمال أفضل.

إن إعداد مخازن البيانات وإدارتها اليوم يتضمن الكثير من المهام اليدوية والمعقدة والمستهلكة للوقت. يشمل هذا العمل تحميل البيانات من مصادر متنوعة، ومراقبة تدفقات البيانات هذه، وإعداد الأجزاء، وتشغيل التشفير وإدارة المفاتيح، وتحديد مهام التحويل ومراقبة تشغيلها، وإعادة تنظيم البيانات في تنسيق أعمدة، وإلغاء نسخ البيانات المتكررة، ومطابقة السجلات المرتبطة. وبمجرد تحميل البيانات إلى مخزن البيانات، يجب عليك منح الوصول الدقيق إلى مجموعات البيانات، وتدقيق الوصول على مدار الوقت عبر مجموعة كبيرة من أدوات وخدمات التحليلات والتعلم الآلي.

إنشاء مخزن بيانات باستخدام Lake Formation هو أمر بسيط بقدر تحديد مصادر البيانات وتحديد سياسات الأمان والوصول التي ترغب في تطبيقها. بعد ذلك، تساعدك Lake Formation في جمع البيانات ووضعها في أدلة من قواعد البيانات وتخزين الكائنات، وفي نقل البيانات إلى مخزن بيانات Amazon Simple Storage Service (S3) الجديد، وفي تنظيف بياناتك وتصنيفها باستخدام خوارزميات التعلم الآلي، وفي تأمين الوصول إلى بياناتك الحساسة باستخدام ضوابط دقيقة على مستويات العمود، والصف، والخلية. يمكن لمستخدميك الوصول إلى دليل بيانات مركزي يصف مجموعات البيانات المتوفرة واستخدامها المناسب. ثم يستخدمون مجموعات البيانات هذه من خلال مجموعة من خدمات التحليلات والتعلم الآلي مثل Amazon Redshift، وAmazon Athena، وAmazon EMR for Apache Spark، وAmazon QuickSight. تعتمد Lake Formation على الإمكانات المتوفرة في AWS Glue.

AWS re:Invent 2018 - الإعلان عن AWS Lake Formation ‏(2:44)

الفوائد

إنشاء مستودعات بيانات بسرعة

مع Lake Formation، يمكنك نقل بياناتك وتخزينها ووضعها في أدلة وتنظيفها بشكل أسرع. يمكنك بسهولة الإشارة إلى Lake Formation في مصادر بياناتك، وستسجل هذه المصادر وتنقل البيانات إلى مخزن بيانات Amazon S3 الجديد. تنظم Lake Formation البيانات في S3 حول مصطلحات الاستعلام المستخدمة بشكل متكرر داخل مجموعات بحجم مناسب لزيادة الكفاءة. تغير أيضًا البيانات إلى تنسيقات مثل Apache Parquet وORC للحصول على تحليلات أسرع. بالإضافة إلى ذلك، تمتلك Lake Formation التعلم الآلي المضمن من أجل إلغاء النسخ المتكررة والعثور على السجلات المتطابقة (إدخالان يشيران إلى نفس الشيء) لزيادة جودة البيانات.

تبسيط إدارة الأمان

توفر Lake Formation مكانًا واحدًا لتحديد وتعزيز أدوات التحكم في إمكانية الوصول التي تعمل على مستويات الجدول، والعمود، والصف، والخلية لجميع المستخدمين والخدمات التي تصل إلى بياناتك. يتم تطبيق سياساتك بشكل دائم، وهذا يلغي الحاجة إلى تكوينها بشكل يدوي عبر خدمات الأمان مثل، AWS Identity and Access Management، وAWS Key Management Service، وخدمات التخزين مثل S3، وخدمات التحليلات والتعلم الآلي مثل Redshift وAthena وAWS Glue وEMR for Apache Spark. ويؤدي ذلك إلى تقليل الجهد المبذول في تكوين سياسات عبر الخدمات ويوفر دوام الامتثال والإنفاذ.

توفير الوصول ذاتي الخدمة إلى البيانات

مع Lake Formation، يمكنك إنشاء دليل بيانات يصف مجموعات البيانات المختلفة المتوفرة، بجانب مجموعات المستخدمين الذي لديهم إمكانية وصول لكل مجموعة منها. يجعل هذا مستخدميك أكثر إنتاجية من خلال مساعدتهم في العثور على مجموعة البيانات المناسبة لتحليلها. من خلال توفير دليل من بياناتك لديه إنفاذ أمان دائم، تُسهِّل Lake Formation على المحللين وعلماء البيانات استخدام خدمة التحليلات المفضلة لهم. يمكنهم استخدام EMR for Apache Spark، وRedshift، وAthena، وAWS Glue، وAmazon QuickSight في مجموعات بيانات متنوعة موجودة الآن في مخزن بيانات واحد. كما يمكن للمستخدمين جمع هذه الخدمات بدون الحاجة إلى نقل البيانات بين المستودعات.

كيفية العمل

كيفية العمل

تساعد Lake Formation في إنشاء مخزن بياناتك وتأمينه وإدارته. أولاً، تحديد البيانات المخزنة حاليًا في S3 أو بقواعد البيانات الارتباطية أو NoSQL ثم نقل البيانات إلى مستودع بياناتك. بعد ذلك، يمكنك تسجيل البيانات ووضعها في أدلة وإعدادها للتحليلات. ثم تزود المستخدمين بالخدمة الذاتية الأمنة للوصول إلى البيانات من خلال خدمات التحليلات التي يختارونها. يمكن أيضًا لتطبيقات الأطراف الخارجية وخدمات أخرى من AWS الوصول للبيانات من خلال الخدمات الموضحة. تدير Lake Formation كل المهام المخصصة الموضحة في المربع البرتقالي والمتكاملة مع الخدمات ومخازن البيانات المبينة في المربعات الزرقاء.

حالات الاستخدام

سرعة إنشاء مخازن البيانات

استخدم المخططات في Lake Formation لنقل بياناتك وتخزينها وتنظيمها وتنظيفها وترتيبها بشكل أسرع. حوّل البيانات إلى تنسيقات مثل Parquet وORC للحصول على تحليلات أسرع، واستخدم التعلم الآلي المدمج لإلغاء التكرار والعثور على السجلات المتطابقة. يُمكنك تبسيط كيفية تخزين بياناتك والحفاظ عليها باستخدام Governed Tables (الجداول المُحكمة)، وهي نوع جديد من جدول Amazon S3. تستخدم الجداول المُحكمة معاملات ACID (دقيقة ومتسقة ومعزولة ومتينة) التي تدير الاختلافات تلقائيًا وتضمن اتساق طرق عرض البيانات لكل المستخدمين. كما تعكس الجداول المُحكمة بياناتك وتحسنها تلقائيًا لتحسين أداء المحركات عند الاستعلام عن الجداول المُحكمة.

المركزية في تحديد أدوات التحكم في الوصول وإدارتها

توفر Lake Formation مكانًا واحدًا لتحديد الأذونات الدقيقة وتصنيفها ووضع العلامات عليها وإدارتها. كما يمكنك تحديد قائمة هرمية تضم العلامات، وإسناد العلامات لقواعد البيانات والجداول والأعمدة، وتكوين الأمان على مستوى الأعمدة والخلايا.

تعزيز تصنيف البيانات والوصول الدقيق

تعزز Lake Formation السياسات بدون الاضطرار إلى تكوين أدوات التحكم في الوصول في كل خدمة استهلاكية. تقوم Lake Formation بتصفية البيانات تلقائيًا ولا تفصح سوى عن البيانات المسموح لها من قبل السياسة المحددة للمستخدمين المصرح لهم وبدون الحاجة إلى نسخ البيانات.

تمكين الإدارة المستمرة للبيانات، والانتقال عبر الزمن، وتحسين التخزين

عزّز موثوقية مخزن البيانات بالنسبة فيما يخص تحديث البيانات المجمعة وتحديث بيانات التدفق. استعلم عن النسخ القديمة من البيانات وقم بتدقيق البيانات المتغيرة. يمكنك الضغط التلقائي للملفات الصغيرة وتمكين عوامل التصفية حسب الضغط لأسفل لتقليل عمليات فحص البيانات وتحسين أداء الاستعلامات.

تمكين مخازن البيانات الموحدة من خلال المشاركة عبر الحسابات

قم بتوصيل المنتجات غير المركزية المعتمدة على المجال داخل مؤسستك باستخدام مشاركة البيانات جيدة الحوكمة التي تتسم بأدنى حد من نقل البيانات.

ارجع إلى «ما المقصود بمخزن البيانات؟» لمعرفة مزيد من المعلومات.

العملاء

Nu Skin

Nu Skin Enterprises هي شركة بيع مباشر توزِّع أكثر من 200 منتج عالي الجودة لمكافحة الشيخوخة في فئات العناية الشخصية والمكملات الغذائية.

"واجهنا تحدي توسعة الإمكانات وتحجيم معدل النقل في أنظمة التحليلات الموجودة. تم توزيع بياناتنا بين قواعد بيانات متنوعة غير متصلة وبين حلول البرمجيات كخدمة (SaaS)، مما يجعل من الصعب تحليل البيانات على نطاق واسع خلال تقييد الوصول إلى البيانات الحساسة. وللتغلب على هذا التحدي، أنشأنا حل مخزن بيانات على AWS. وقد أتاح لنا هذا المخزن تجميع البيانات من مستودعات بيانات متنوعة في Amazon S3، حيث وضعنا كل البيانات في أدلة وقمنا بتأمينها باستخدام AWS Lake Formation. فبدون AWS Lake Formation، سيكون من المستحيل تحقيق الهدف المتمثل في استخدام طبقة أمان سهلة وقابلة للتكيف لكل البيانات في Amazon S3. كان من السهل إعداد ضوابط وصول دقيقة وتطبيقها استنادًا إلى الأشخاص المستخدمين."

سوبر، نائب رئيس بنية المؤسسة وخدمات التقنية العالمية – Nu Skin Enterprises

Panasonic

شركة Panasonic Avionics هي الشركة الرائدة في أنظمة الاتصال والترفيه بالطائرات.

«أردنا إنشاء منصة بيانات ذات قدرة في إدارة إعدادات الأمان لكل التطبيقات المختلفة ببيئتنا. باستخدام AWS Lake Formation، يمكنك الآن تحديد السياسات مرة واحدة ثم إنفاذها بالطريقة ذاتها بكل موقع ولكل الخدمات المتعددة التي نستخدمها، بما في ذلك، AWS Glue وAmazon Athena. يقدم مستوى التحكم المعزز لنا إمكانية وصول آمنة للبيانات وبيانات التعريف الموجودة بالأعمدة والجداول، وليس للكائنات المجمَّعة وهو ما يعتبر جزءًا مهمًا لمعيار الحوكمة وأمان المعلومات."

أناند ديسيكان، مدير الخدمات السحابية وخدمات البيانات – Panasonic Avionics

Accenture

Accenture هي شركة رائدة في الخدمات الاحترافية العالمية، توفر نطاقًا واسعًا من الخدمات والحلول في العمليات الاستراتيجية والاستشارية والرقمية والتقنية.

«أركز على مساعدة الزبائن في البيانات أثناء رحلتهم السحابية. لقد رأينا المنظمات تحديدًا تتعامل مع نقص البيانات الموثوق بها عند حاجتهم لتنفيذ تحليلات على البيانات التي تأتي من مصادر متعددة. تنظيف البيانات هي خطوة هامة في تحليلات البيانات كما يمكن أن تؤثر بشكل كبير على نتائج الأعمال وصناعة القرار. تمتلك AWS Lake Formation مزايا جديدة لديها فائدة ضخمة في مواجهة تحدي صحة البيانات وتأمين الوصول إلى مستودع البيانات. وقد وجدنا أنه من المفيد بشكل كبير استغلال تقنيات تعلم الآلة المتطورة من أجل إعداد البيانات للعثور على سجلات متطابقة وتنظيف البيانات وإلغاء نسخها من مصادر البيانات المختلفة. يساعد هذا في خفض الوقت والجهد والتكلفة وفي الوقت نفسه تحسين جودة البيانات الموجودة بمخازن بيانات العملاء وتحسين دقتها."

نامراتا ماهيشواري، كبير مهندسين بمجموعة أعمال البيانات – Accenture

Zalando

Zalando هي منصة أوروبية رائدة عبر الإنترنت للموضة ونمط الحياة.

«ونظرًا لأنها الشركة الأوروبية الأعظم في الموضة، نعمل بجد للعثور على حلول رقمية لكل جانب برحلة الموضة. أعطتنا AWS Lake Formation نقطة مركزية قابلة للتوسع في التحكم في الوصول للبيانات من خلال Amazon Redshift والذي لم يبسِّط العملية فقط، لكنه حسَّن فيها من خلال التحكم الدقيق في كيفية استخدامنا للبيانات. يمكننا الآن استكشاف البيانات والوصول إليها وتحليلها في مستودع البيانات خاصتنا بالأدوات المفضلة لدينا والاستفادة منها في ذكاء الأعمال وعلم البيانات. يساعد مسار العمل الانسيابي هذا المسؤولين التنفيذيين لدينا في اتخاذ القرارات المناسبة في التوقيت المناسب، كما يتبنى الابتكار من خلال التعلم الآلي."

ألبيرتو ميورين، رئيس قسم الهندسة – Zalando SE

Life360

Life360 هي خدمة ترفيهية عالمية للعائلات. يقرب تطبيق Life360 العائلات مصحوبًا بمزايا ذكية مصممة لحماية وربط الأشخاص الأكثر اهتمامًا.

"أردنا استخدام AWS Lake Formation لإنشاء مخزن بيانات لدعم البيانات ذات السلسلة الزمنية المستندة للموقع ولتسهيل تحميل البيانات. وقد ساعدت المخططات مسبقة الصنع في الحصول على البيانات داخل مخزن البيانات بدون أن يضطر فريق الهندسة إلى كتابة التعليمة البرمجية من البداية، وبالتالي يستطيعون التركيز على تفعيل الاستيعاب وليس إعادة ابتكار العجلة من جديد. مع AWS Lake Formation، استطعنا الاستفادة السريعة من البيانات المتاحة في Amazon S3 وإتاحتها عبر مجموعة واسعة من خدمات البيانات في AWS. تبقى البيانات في مكانها في Amazon S3، كما يمكننا تحليلها بطرق مختلفة عديدة والحفاظ على السيطرة الكاملة عليها."

ريتشارد تشينولت، رئيس الخدمات السحابية والبيانات – Life360, Inc.

Change Healthcare

Change Healthcare هي شركة رائدة مستقلة في تقنيات الرعاية الصحية توفر بيانات وتحليلات مدفوعة بحلول تصل حتى 2100 اتصال مدفوع تجاري وحكومي و5500 مستشفى و900000 طبيب و33000 صيدلية.

«نعالج البيانات من ملايين المعاملات اليومية في ظل المحافظة على الامتثال بلوائح صناعة الرعاية الصحية، بما في ذلك، لوائح HIPAA. إننا مندهشون بشأن تشغيل AWS Lake Formation، حيث توفر هذه الخدمة نقطة تحكم مركزية تُسهّل تحميل البيانات وتنظيفها وتأمينها ووضعها في أدلة من آلاف العملاء إلى مخزن البيانات المستند إلى AWS، ما يُحدث انخفاضًا كبيرًا في الحمل التشغيلي لدينا. تجعل ضوابط التحكم في الوصول للبيانات في Lake Formation من السهل علينا تحديد سياساتنا مرةً واحدةً وتنفيذها عبر جميع خدمات التحليلات وخدمات التعلم الآلي التي نستخدمها، من خلال سجلات تدقيق لإظهار الامتثال."

آرون سيمانسكي، كبير موظفي التكنولوجيا – Change Healthcare 

Fender Digital

Fender Digital هو جزء من شركة Fender صاحبة العلامة التجارية الأكثر شهرةً في مجال آلات الجيتار، حيث تنشئ التطبيقات، والمواقع الإلكترونية، والمنصات، والأدوات التي تتمم تجربة آلات الجيتار ومكبرات الصوت والأجهزة الصوتية التي تصنعها Fender.

"ننشئ الكثير من المستخدمين وبيانات الاستخدام من الأجهزة والتطبيقات الرقمية. نخطط لإنشاء مخزن بيانات على AWS لتشغيله بجانب مستودع البيانات المستند إلى Amazon Redshift. لا أطيق الانتظار حتى يحصل فريقي على AWS Lake Formation. Lake Formation ستسهل لنا تحميل البيانات ونقلها ووضعها بأدلة كما ستوفرها داخل المنظمات بشكل آمن وعبر مجموعة واسعة من خدمات AWS. باستخدام الخيار الجاهز للمؤسسات مثل Lake Formation، سنتمكن من قضاء مزيد من الوقت في اشتقاق القيمة من بياناتنا بدلاً من القيام بالعبء الثقيل المتضمن إعداد مخزن البيانات وإدارته يدويًا."

جوشوا كوتش، نائب رئيس قسم الهندسة – Fender Digital

Cloudreach

بفضل منصة Cloudamize المعززة ببرامج الترحيل والإدارة، توفر Cloudreach البساطة والثقة المطلقة في عملية صنع القرار التي تعتمد على البيانات.

"تقوم AWS Lake Formation بإضفاء الصبغة الديمقراطية على مخزن البيانات كما تنشئ نقطة تسارع لاستراتيجية بيانات المؤسسة. تركز AWS Lake Formation على الأمان وحوكمة الخدمات، مما يبسط الإدارة ويخفض من النفقات التشغيلية. من خلال تسريع عملية دمج البيانات عبر المؤسسة وغيرها من مبادرات البيانات مثل التعلم الآلي، نبدأ في الارتقاء بقيمة الأعمال."

كيفين ديفيس، كبير موظفي التكنولوجيا بقسم ممارسات AWS ‏– Cloudreach

Amgen

تعتبر Amgen هي أكبر شركة عالمية مستقلة في مجال التكنولوجيا البيولوجية.

"كان لدينا في Amgen عدد كبير من المستخدمين من مجموعات Amazon Redshift وAmazon EMR لما يقرب من ثلاث سنوات. فإعداد ضوابط الوصول والأمان لكل حساب AWS، وخدمة ومستخدم ومجموعة بيانات على المستوى التفصيلي المطلوب قد يكون أمرًا مرهقًا. تبسط AWS Lake Formation العملية من خلال نقطة تحكم مركزية وفي الوقت نفسه تمكيننا من إدارة الأشخاص الذين يستخدمون بياناتنا وكيفية استخدامهم لها، بجانب تفاصيل أخرى. تسمح AWS Lake Formation لنا بإدارة الأذونات في كائنات Amazon S3 مثل قيامنا بإدارة الأذونات في البيانات الموجودة بقاعدة بيانات. سيتمكن مستخدمينا من العثور على البيانات التي يحتاجون إليها والوصول إليها وتحليلها باستخدام الأدوات التي يفضلوها. يمكن لسير العمل الجديد هذا أن يجعل الجميع أكثر فعالية عند استخدام بيانات Amgen.»

كيربي جونسون، مالك منتجات مخازن بيانات المؤسسة – Amgen

Alcon

Alcon هي شركة رائدة في ابتكار وتطوير تغيير حياة منتجات العناية بالعين والرؤية.

"ومثل الكثير من الشركات، بدأنا مبادرة مخزن البيانات للتخلص من مستودعات البيانات التي لا يمكن الوصول إليها. باستخدام AWS Lake Formation، يمكننا بسهولة إضافة وصول لحاويات Amazon S3 الموجودة وتحديد ما بها وكيفية استخدامها. تبقى البيانات في مكانها في S3، ولكن يصبح لدينا تحكم كامل فيها بعمليات استخدام أخرى."

سرينيفاس رافيليسيتي، قائد تحليلات تقنية المعلومات – Alcon

Quantiphi

Quantiphi هي شركة خدمات وبرامج ذكاء اصطناعي وبيانات كبيرة مدفوعة برغبة في حل مشكلات الأعمال المعقدة. Quantiphi متخصصة في إنشاء مخازن بيانات وحلول ذكاء اصطناعي لتقديم قيمة يمكن قياسها.

"تتيح AWS Lake Formation لنا تقديم مخزن بيانات آمن مع إمكانية وصول إلى البيانات ذات الصلة خلال أيام. لدينا الآن القدرة على تقديم الأفضل بالعالم أجمع لعملائنا؛ الأمان الكامل بالإضافة إلى وصول مبسط للبيانات ذات الصلة ليستطيع مستخدموها اتخاذ القرارات بسهولة. يمكن لعملائنا التركيز على اتخاذ قرارات أعمال أكثر ذكاءً قائمة على التحليلات من خلال الاستفادة من مصدر بيانات مركزي قوي."

أرناف جوبتا، قائد ممارسات AWS ‏– Quantiphi

Curvo Labs

Curvo هي شركة برمجيات كخدمة تضع تركيزها بشكل حصري على سلسلة إمداد الرعاية الصحية. بفضل الخبرة العميقة وممارسات التطوير المرنة، تقوم بإنشاء التحليلات، وسير العمل، والتشغيل الآلي لإدارة النفقات في مجال الرعاية الصحية بشكل أسرع وأسهل.

"تطبيع (تسوية) البيانات هي خطوة مهمة في توفير نتائج أفضل للمرضى من خلال إدخال الشفافية إلى بيانات تسعير المعايير للمنتجات الطبية والسريرية. باستخدام تحويلات تعلم الآلة في AWS Lake Formation، يمكننا الآن معالجة مجموعات البيانات في أربع ساعات وفي أقل من أسبوع كما تحسنت لدينا درجة الدقة لما يقارب 100%. تسمح هذه السرعة والدقة لعملاء الرعاية الصحية من الاستجابة بسرعة إلى تغيرات السوق وتقديم رعاية بأسعار مقبولة بالنهاية بدون التضحية بنتائج المرضى. نقدم لهم في يوم واحد ما يقدمه المنافسون في 4 أو 6 أسابيع."

نيك ساجيز، كبير موظفي التكنولوجيا – Curvo

الميزات الجديدة

التاريخ
  • التاريخ
1
معرفة المزيد حول ميزات AWS Lake Formation

تعرف على المزيد حول ميزات AWS Lake Formation من خلال زيارة صفحة الميزات.

معرفة المزيد 
اشترك للحصول على حساب

تمتع بالوصول الفوري إلى الطبقة المجانية لخدمة AWS. 

التسجيل 
بدء البناء في وحدة التحكم

ابدأ الإنشاء باستخدام AWS Lake Formation في وحدة الإدارة في AWS.

تسجيل الدخول