ما المقصود بشبكة البيانات؟

شبكة البيانات هي إطار عمل بنيوي يتغلب على تحديات أمان البيانات المتقدمة من خلال الملكية الموزَّعة واللامركزية. تمتلك المؤسسات مصادر بيانات متعددة، من مختلف خطوط الأعمال، التي يجب دمجها من أجل التحليلات. وتوحَّد بنية شبكة البيانات مصادر البيانات المختلفة بفاعلية، وتربطها معًا من خلال إرشادات مشاركة وحوكمة البيانات المُدارة مركزيًا. يمكن لوظائف الأعمال الحفاظ على التحكم في كيفية الوصول إلى البيانات المُشارَكة، ومَن يحق له الوصول إليها، وبأي تنسيقات يمكن الوصول إليها. تضيف شبكة البيانات تعقيدات إلى البنية ولكنها توفر أيضًا الكفاءة من خلال تحسين الوصول إلى البيانات وأمانها وقابليتها للتوسع.

ما التحديات التي ستتغلب عليها شبكة البيانات؟

على الرغم من أن المؤسسات تتمتع بإمكانية الوصول إلى حجم البيانات الآخذ في التزايد، فإنه يتعين عليها فرز البيانات وتصفيتها ومعالجتها وتحليلها للحصول على فوائد عملية. غالبًا ما تستعين المؤسسات بفريق مركزي من المهندسين والعلماء من أجل إدارة البيانات. يستخدم الفريق نظامًا أساسيًا مركزيًا للبيانات للأغراض التالية:

  • استيعاب البيانات من جميع وحدات الأعمال (أو مجالات الأعمال) المختلفة.
  • تحويل البيانات إلى تنسيق متسق وجدير بالثقة ومفيد. على سبيل المثال، يمكن للفريق التأكد من أن جميع التواريخ في النظام واردة بتنسيق موحَّد أو تلخيص التقارير اليومية.
  • إعداد البيانات لمستهلكي البيانات، على سبيل المثال عن طريق إنشاء تقارير للأشخاص أو إعداد ملفات XML للتطبيقات. القراءة عن XML »

كلما ازداد حجم البيانات، تواجه المؤسسات تكاليف متزايدة لتحافظ على سرعة الأعمال نفسها كما في السابق. من الصعب توسيع نطاق النظام الموحد للأسباب التالية.

فريق البيانات المنعزِلة

يضم فريق البيانات المركزي علماء بيانات متخصصين ومهندسين ذوي معرفة محدودة بالأعمال والمجالات. ومع ذلك، لا يزال يتعين عليهم توفير البيانات لمجموعة متنوعة من الاحتياجات التشغيلية والتحليلية بدون فهم واضح للدوافع.

الاستجابة البطيئة للتغيير

عادةً ما يطبق مهندسو البيانات مسارات تستوعب البيانات وتحولها عبر عدة خطوات قبل تخزينها في مخزن بيانات مركزي. وعند إجراء أي تغييرات مطلوبة، يتعين تطبيق تعديلات على المسار بأكمله. يتعين على الفريق المركزي إجراء هذه التغييرات أثناء إدارة الأولويات المتضاربة وفي نطاق معرفته المحدودة بمجال الأعمال.  

انخفاض الدقة

وحدات الأعمال منفصلة عن مستهلكي البيانات وفِرق البيانات المركزية. ونتيجةً لذلك، فإنها تفتقر إلى الحافز الذي يدفعها لتقديم بيانات ذات مغزى وصحيحة ومفيدة.

ما مزايا شبكة البيانات؟

بمرور الوقت، يمكن أن تؤدي بنية النظام الأساسي للبيانات إلى إثارة شعور بالإحباط لدى مستهلكي البيانات وانعزال منتجي البيانات وزيادة العبء على فريق إدارة البيانات. تحاول بنية شبكة البيانات التغلب على هذه التحديات من خلال تمكين وحدات الأعمال من الحصول على درجة كبيرة من الاستقلالية وتولي زمام الأمور في مجال البيانات التابع لها. ترد فيما يلي فوائد بنية شبكة البيانات.

معالجة البيانات بطريقة ديمقراطية

تنقل شبكة البيانات مهمة التحكم في البيانات إلى خبراء المجال الذين ينشئون منتجات بيانات ذات مغزى ضمن إطار عمل لامركزي لحوكمة البيانات. يطلب مستهلكو البيانات أيضًا الوصول إلى منتجات البيانات ويطلبون موافقات أو تغييرات مباشرةً من مالكي البيانات. نتيجةً لذلك، يتمكن كل شخص من الوصول على نحو أسرع إلى البيانات ذات الصلة، ويُحسِّن الوصول الأسرع من سرعة الأعمال.

زيادة المرونة

تُعد البنية التحتية المركزية للبيانات أكثر تعقيدًا، وتتطلب التعاون لصيانتها وتعديلها. بدلاً من ذلك، تعيد شبكة البيانات تنظيم التنفيذ التقني للنظام المركزي لمجالات الأعمال. يؤدي ذلك إلى القضاء على مسارات البيانات المركزية وتقليل العقبات التشغيلية والضغوط التقنية على النظام.

كفاءة التكلفة

تبتعد بنية البيانات الموزَّعة عن معالجة الدُفعات، وبدلاً من ذلك تعزز اعتماد تدفق البيانات في الوقت الفعلي. يمكنك تحسين رؤية تخصيص الموارد وتكاليف التخزين، ما يؤدي إلى تحسين الميزانية وخفض التكاليف.

تحسين اكتشاف البيانات

يَحُول نموذج شبكة البيانات دون تَشكُّل مجموعة البيانات المنعزلة حول فِرق الهندسة المركزية. وهو يقلل أيضًا من مخاطر احتجاز أصول البيانات داخل أنظمة مجالات الأعمال المختلفة. بدلاً من ذلك، يتحكم إطار عمل إدارة البيانات المركزي في البيانات المتاحة في المؤسسة ويسجلها. على سبيل المثال، تُسجِّل فِرق المجال بياناتها في سجل مركزي تلقائيًا.

تعزيز الأمان والامتثال

تفرض بُنى شبكة البيانات سياسات أمان البيانات ضمن المجالات وفيما بينها. وهي توفر المراقبة والتدقيق المركزيين لعملية مشاركة البيانات. على سبيل المثال، يمكنك فرض متطلبات بيانات التسجيل والتتبع على جميع المجالات. يمكن للمدققين مراقبة الاستخدام والتواتر المتعلقين بالوصول إلى البيانات.

ما حالات استخدام شبكة البيانات؟

يمكن لشبكة البيانات دعم جميع أنواع حالات استخدام البيانات الكبيرة. وإليك بعض الأمثلة أدناه.

تحليلات البيانات

توفر وظائف الأعمال المتعددة بيانات موثوقًا بها وعالية الجودة لأعباء عمل تحليلات البيانات. يمكن لفِرقك استخدام البيانات لإنشاء لوحات معلومات مخصصة لذكاء الأعمال تعرض أداء المشروع ونتائج التسويق والبيانات التشغيلية. يمكن لعلماء البيانات تسريع مشروعات تعلّم الآلة للحصول على المزايا الكاملة للأتمتة.

خدمة العملاء

توفر شبكة البيانات عرضًا شاملاً للعملاء من أجل فِرق الدعم والتسويق. على سبيل المثال، يمكن لفِرق الدعم الحصول على البيانات ذات الصلة وتقليل متوسط وقت المعالجة، ويمكن لفِرق التسويق التأكد من أنهم يستهدفون العملاء ذوي الخصائص الديموغرافية الملائمة في حملاتهم.

إعداد التقارير التنظيمية

إن الحاجة إلى وحدة تخزين وحُسن التوقيت والدقة من أجل البيانات التي تلبي الأهداف التنظيمية تفرض تحديات على كل من الجهات التنظيمية والشركات المُنظَّمة. يمكن أن يستفيد جميع الأطراف من تطبيق تقنيات شبكة البيانات. على سبيل المثال، يمكن للمؤسسات إدخال بيانات التقارير إلى شبكة بيانات خاضعة للتحكم مركزيًا من قبِل جهات تنظيمية.

بيانات الجهات الخارجية

يمكنك تطبيق تقنية شبكة البيانات لحالات الاستخدام التي تتطلب مجموعات بيانات عامة وأخرى تابعة لجهات خارجية. يمكنك التعامل مع البيانات الخارجية كمجال منفصل وتنفيذها في الشبكة لضمان الاتساق مع مجموعات البيانات الداخلية.

ما مبادئ بنية شبكة البيانات؟

يجب أن تُنفِّذ مُؤَسستك المبادئ الأربعة التالية لاعتماد نموذج شبكة البيانات.

البنية الموزَّعة المستندة إلى المجال

يقترح نهج شبكة البيانات تنظيم مسؤولية إدارة البيانات على مستوى وظائف أو مجالات الأعمال. بحيث تكون فِرق المجال مسؤولة عن جمع البيانات المتعلقة بوظائف الأعمال والناشئة عنها وتحويلها وتوفيرها. بدلاً من تدفق بيانات المجال من مصادر البيانات إلى نظام أساسي مركزي للبيانات، يستضيف أي فريق محدد ما لديه من مجموعات بيانات ويعالجها بطريقة سهلة الاستخدام. على سبيل المثال، يمكن أن يمتلك بائع تجزئة مجالاً ذا صلة بالملابس يحتوي على بيانات عن منتجات الملابس ومجالاً ذا صلة بسلوك موقع الويب الذي يحتوي على تحليلات لسلوكيات الزائرين للموقع.

البيانات كمنتج

لكي يكون تطبيق شبكة البيانات ناجحًا، يجب على كل فريق مجال أن يطبق نهج التفكير المستند إلى المنتج على مجموعات البيانات التي يقدمها. يجب أن يفكر الفريق في أصول بياناته كمنتجات ويفكر في بقية الفِرق المعنية بأعمال المؤسسة والبيانات كعملاء له.

للحصول على أفضل تجربة للمستخدم، يجب أن تتمتع منتجات بيانات المجال بالصفات الأساسية التالية.

قابلية الاكتشاف

لتسهيل قابلية الاكتشاف، يُسجِّل كل منتج داخل كتالوج مركزي للبيانات.

قابلية العنونة

يجب أن يكون لكل منتج بيانات عنوان فريد يساعد مستهلكو البيانات في الوصول إليه برمجيًا. يتبع العنوان عادةً معايير التسمية المحددة مركزيًا داخل المؤسسة.

الموثوقية

تحدد منتجات البيانات أهداف مستوى الخدمة المقبولة حول مدى اقتراب البيانات من عكس حقيقة الأحداث التي توثقها. فمثلاً، يمكن لمجال الطلبات نشر البيانات بعد التحقق من عنوان العميل ورقم هاتفه.

ذاتية الوصف

يجب أن يكون لجميع منتجات البيانات تراكيب ودلالات لغوية موصوفة جيدة تتبع اصطلاحات التسمية القياسية التي تحددها المؤسسة.

البنية التحتية للبيانات ذاتية الخدمة

تتطلب بنية البيانات الموزَّعة من كل مجال إعداد مسار بيانات لتنقيح منتجات البيانات وتصفيتها وتحميلها. تقدم شبكة البيانات مفهوم النظام الأساسي للبيانات ذاتي الخدمة لتجنب ازدواجية الجهود. يتولى مهندسو البيانات إعداد التقنيات حتى يتسنى لجميع وحدات الأعمال معالجة منتجات بياناتهم وتخزينها. ومن ثمَّ، فإن البنية التحتية ذاتية الخدمة تسمح بتوزيع المسؤولية. تتولى فِرق هندسة البيانات إدارة التقنية، بينما تتولى فِرق الأعمال إدارة البيانات.

حوكمة البيانات الموحَّدة

تطبق بُنى شبكة البيانات الأمان باعتباره مسؤولية مشتركة داخل المؤسسة. وتحدد القيادة المعايير والسياسات الشاملة التي يمكنك تطبيقها على مستوى جميع المجالات. في الوقت نفسه، تسمح بنية البيانات اللامركزية بدرجة كبيرة من الاستقلالية فيما يتعلق بتطبيق المعايير والسياسات على مستوى المجال.

كيف يمكن إنشاء شبكة بيانات في مؤسستك؟

شبكة البيانات هي مفهوم جديد لقي رواجًا بعد الجائحة. تُجرِّب المؤسسات تقنيات مختلفة أثناء محاولاتها لإنشاء شبكة بيانات لحالات استخدام محددة. ومع ذلك، لا يزال اعتماد شبكة بيانات مؤسسية على مستوى المؤسسة بالكامل أمرًا نادر الحدوث. لا يوجد طريق واضح لتنفيذ شبكة البيانات، ولكن إليك بعض الاقتراحات.

تحليل بياناتك الحالية

قبل إنشاء شبكة بيانات، يجب فهرسة بياناتك الحالية وتحديد مجالات الأعمال ذات الصلة. إن اتباع بعض قواعد التنسيق هو السبيل إلى تحقيق الارْتباط الفعَّال للبيانات فيما بين المجالات. فمثلاً، ستحتاج إلى تحديد معايير شاملة لتنسيق أنواع الحقول وحقول البيانات الوصفية واصطلاحات عناوين منتجات البيانات.

تنفيذ سياسات حوكمة البيانات الشاملة

حوكمة البيانات الموحَّدة تتطلب من فريق تكنولوجيا المعلومات المركزي تحديد معايير إعداد التقارير والمصادقة والامتثال الخاصة بشبكة البيانات. يمكنك أيضًا تحديد عناصر التحكم في الوصول الدقيقة التي يطبقها مالكو منتجات البيانات عند استضافة ما لديهم من مجموعات البيانات. بينما يحدد منتجو البيانات جودة البيانات ويقيسونها، تساعد سياسات الحوكمة المركزية في توجيه قراراتهم.

إنشاء نظام أساسي للبيانات ذاتي الخدمة

يجب أن يكون نظام البيانات الأساسي ذاتي الخدمة شاملاً، بحيث يمكن لأي شخص إنشاء منتجات بيانات مجال جديدة عليه. يجب أن يخفي أيضًا التعقيد التقني الكامن، ويوفر مكونات البنية التحتية بطريقة الخدمة الذاتية. فيما يلي بعض الإمكانات التي يجب تضمينها:

  • تشفير البيانات
  • مخطط منتجات البيانات
  • الحوكمة والتحكم في الوصول
  • اكتشاف منتجات البيانات، مثل تسجيل الكتالوج أو نشره
  • تسجيل منتجات البيانات ومراقبتها
  • التخزين المؤقت لتحسين الأداء

يمكنك أيضًا إنشاء الأتمتة، مثل التكوينات والبرامج النصية، لتقليل الحد الأدنى لوقت الإنتاج المستغرق في إنشاء منتجات البيانات.

اختيار التقنيات المناسبة

يمكن لأنظمة التخزين التقليدية الحالية، مثل مستودعات البيانات ومخازن البيانات، أيضًا تشغيل شبكة بياناتك. ما عليك سوى تحويل استخدامها من الأنظمة الموحَّدة إلى مستودعات بيانات لامركزية متعددة. تمكنك شبكة البيانات أيضًا من اعتماد أنظمة السحابة الأساسية والتقنيات القائمة على السحابة. تُحد البنية التحتية السحابية من التكاليف التشغيلية والجهد المطلوب لإنشاء شبكة بيانات. يجب عليك اختيار مُزود خدمة سحابية يوفر خدمات إدارة البيانات الوفيرة لدعم بنية شبكة البيانات. يتعين عليك كذلك مراعاة متطلبات تكامل البيانات مع الأنظمة القديمة.

بدء التحوّل الثقافي على مستوى المؤسسة

تتوفر لدينا في الوقت الحاضر التقنيات والأدوات اللازمة لإنشاء شبكة بيانات تتضمن العديد من منتجات البيانات بسهولة. أصبح التحوُّل نحو توحيد مسار معالجة الدُفعات ومسار معالجة تدفق البيانات أسهل الآن من أي وقت مضى باستخدام أدوات مثل Amazon EMR. ومع ذلك، فإن توسيع نطاق شبكة البيانات إلى ما يتجاوز المشروعات الصغيرة يستلزم تحولاً نموذجيًا بعيدًا عن بُنى البيانات المركزية السابقة. فإنه يتطلب لغة جديدة تركز على ما يلي:

  • اكتشاف البيانات واستخدامها أكثر من استخراجها وتحميلها
  • معالجة البيانات في الوقت الفعلي أكثر من معالجة الدُفعات كبيرة الحجم في وقت لاحق
  • الملكية الموزّعة لمنتجات البيانات أكثر من بنية نظام البيانات الأساسي المركزي

في الوقت الحالي، غالبًا ما توجِّه تقنية البيانات القرارات المتعلقة بالبنية. تعكس شبكة البيانات هذا التدفق، وتولي أهمية لمنتجات بيانات المجال بحيث توجِّه القرارات المتعلقة بالتقنيات بدلاً من ذلك.

ما الفرق بين شبكة البيانات ومخزن البيانات؟

مخزن البيانات هو مستودع يمكنك تخزين فيه جميع بياناتك المهيكلة وغير المهيكلة بدون أي معالجة مسبقة وعلى أي نطاق. في أنظمة البيانات الأساسية المركزية، يكون مخزن البيانات هو التقنية الأساسية لتخزين البيانات من جميع المصادر الممكنة.

شبكة البيانات هي نموذج لإدارة البيانات يستخدم مخازن البيانات على نحو مختلف. لم يعد مخزن البيانات حجر الزاوية في البنية بأكملها. بدلاً من ذلك، يمكنك استخدامه لتطبيق منتجات البيانات أو باعتباره جزءًا من البنية التحتية ذاتية الخدمة.

القراءة عن مخازن البيانات »

ما الفرق بين شبكة البيانات ونسيج البيانات؟

نسيج البيانات هو بنية حديثة أخرى تستخدم تعلّم الآلة والأتمتة لتحقيق التكامل الشامل لمختلف البيئات السحابية ومسارات البيانات. يمكنك التفكير في الأمر على أنه طبقة تقنية فوق البنية التحتية الأساسية، التي تدمج البيانات بشكل متماسك وتقدمها للمستخدمين غير التقنيين. على سبيل المثال، يستخدم صنّاع القرارات نسيج البيانات لعرض جميع بياناتهم في مكان واحد ولإنشاء روابط بين مجموعات البيانات المختلفة.

لدى كل من نسيج البيانات وشبكة البيانات أهداف متشابهة، ألا وهي إدارة البيانات الموحَّدة والفعَّالة. فمثلاً، لنفترض أن لديك مخزن بيانات مركزي، وأنك تستخدم خدمات AWS بغرض استيعاب البيانات. وفي الوقت نفسه، لديك بنية تحتية قديمة لتحويلات البيانات. يحقق نسيج بياناتك التكامل بين كلا النظامين، ويقدم عرضًا موحدًا بدون تغيير المسار الحالي.

ومن ثمَّ، يستخدم نسيج البيانات التقنية للتعامل مع بنيتك التحتية. من ناحية أخرى، لتطبيق شبكة بيانات يجب عليك تغيير البنية التحتية الأساسية نفسها. ينبغي لك التغيير من نموذج الدفع والاستيعاب لإدارة البيانات إلى نموذج المعالجة على مستوى مجالات الأعمال.

كيف يمكن لـ AWS دعم بُنى شبكة البيانات؟

بنية البيانات الحديثة على AWS تتضمن العديد من الخدمات التي يمكنك استخدامها لتنفيذ شبكة البيانات وبُنى البيانات الحديثة الأخرى في مؤسستك. يمكنك إنشاء منتجات البيانات والبنية التحتية لشبكة البيانات بسرعة وبتكلفة منخفضة بدون المساس بالأداء.

إليك بعض الأمثلة على خدمات AWS التي يمكنك استخدامها:

بادر باستخدام شبكة بياناتك على AWS من خلال إنشاء حساب مجاني اليوم.

شبكة البيانات المتداخلة - الخطوات القادمة

تحقَّق من الموارد الإضافية المتعلقة بالمنتج
تحقَّق من خدمات التحليلات 
تسجيل الاشتراك للحصول على حساب مجاني

تمتع بالوصول الفوري إلى الطبقة المجانية من AWS.

تسجيل الاشتراك 
ابدأ في التطوير في وحدة التحكم

بدء الإنشاء في وحدة إدارة تحكم AWS.

تسجيل الدخول