ما هو Data Mart في مستودع البيانات؟ أنواع وأمثلة
فريق التحرير
⚡ ملخص ذكي
يوفر تصميم مستودع البيانات مجموعة فرعية مركزة من معلومات مستودع البيانات لقسم واحد، ويشمل أنواع مستودعات البيانات الثلاثة، والمراحل الخمس من التصميم إلى الإدارة، وأفضل الممارسات التي تحافظ على سرعة التسليم وأمانه وفعاليته من حيث التكلفة.
يوفر مستودع البيانات القدرة التحليلية لـ مستودع البيانات لفريق واحد. من خلال التركيز على مجال موضوعي واحد، يُمكّن ذلك القسم من تحليل بياناته بسرعة دون التأثر بأعباء العمل على مستوى المؤسسة. تشرح الأقسام التالية ماهية مستودع البيانات، ولماذا تستخدمه المؤسسات، والأنواع الثلاثة المتاحة، وكيفية تنفيذه وإدارته.
ما هي داتا مارت؟
يركز مستودع البيانات على مجال وظيفي واحد في المؤسسة ويحتوي على مجموعة فرعية من البيانات المخزنة في مستودع البيانات. إنها نسخة مكثفة من مستودع البيانات، مصممة للاستخدام من قبل قسم أو وحدة أو مجموعة معينة من المستخدمين - على سبيل المثال، التسويق أو المبيعات أو الموارد البشرية أو المالية.
نظراً لأنها تخدم وظيفة واحدة، فإن مستودع البيانات عادةً ما يكون تحت سيطرة قسم واحد داخل المؤسسة. هذا التركيز يحافظ على نطاقه ضيقاً ووضوحاً في ملكيته.
يستقي مستودع البيانات بياناته من مصادر قليلة فقط، على عكس مستودع البيانات الذي يدمج مصادر متعددة. ونتيجة لذلك، يتميز مستودع البيانات بصغر حجمه ومرونته العالية مقارنةً بمستودع البيانات الكامل.
لماذا نحتاج داتا مارت؟
تعتمد المؤسسات على مستودعات البيانات لعدة أسباب عملية:
- يعمل مستودع البيانات على تحسين وقت استجابة المستخدمين عن طريق تقليل حجم البيانات التي يستعلمون عنها.
- يوفر سهولة الوصول إلى البيانات المطلوبة بشكل متكرر.
- يُعدّ مستودع البيانات أبسط وأرخص في التنفيذ من مستودع بيانات الشركة.
- إنها مرنة: فعندما يتغير النموذج، يمكن إعادة بناء مستودع بيانات أصغر بسرعة.
- يتم تعريف مستودع البيانات من قبل خبير واحد في الموضوع، بينما يتم تعريف مستودع البيانات من قبل فريق متعدد التخصصات، لذا فإن مستودع البيانات أكثر انفتاحًا على التغيير.
- يتم تقسيم البيانات، مما يسمح بصلاحيات تحكم دقيقة للغاية في الوصول.
- يمكن تقسيم البيانات وتخزينها على منصات أجهزة أو برامج مختلفة.
باختصار، لأن مستودع البيانات يتعامل مع شريحة أصغر ومحددة جيدًا من البيانات، فإنه أسرع في البناء، وأرخص في التشغيل، وأسهل في التأمين من مستودع بيانات المؤسسة.
مع ذلك، لا تُبنى جميع مستودعات البيانات بنفس الطريقة. فالمصدر الذي يستمد منه المستودع بياناته هو الذي يحدد أي نوع من الأنواع الثلاثة التي تتعامل معها.
أنواع سوق البيانات
توجد ثلاثة أنواع رئيسية من مستودعات البيانات، يتم تمييزها حسب مصدر بياناتها:
- متكل: تستقي مستودعات البيانات التابعة البيانات مباشرة من مصادر تشغيلية أو مصادر خارجية أو كليهما.
- مستقل: يتم إنشاء مستودع بيانات مستقل بدون مستودع بيانات مركزي.
- الهجين: يمكن لمستودع البيانات الهجين أن يأخذ البيانات من مستودعات البيانات أو الأنظمة التشغيلية.
سوق البيانات التابع
يستمد مستودع البيانات التابع بيانات المؤسسة من مستودع بيانات مركزي واحد، مما يمنحه ميزة المركزية. إذا كنت بحاجة إلى إنشاء مستودع بيانات فعلي واحد أو أكثر، فقم بتهيئتها كمستودعات بيانات تابعة.
يمكن إنشاء مستودع بيانات تابع بطريقتين: الأولى تسمح للمستخدمين بالوصول إلى كل من مستودع البيانات ومستودع البيانات الرئيسي حسب الحاجة، والثانية تقتصر فيها إمكانية الوصول على مستودع البيانات فقط. الطريقة الثانية ليست مثالية، لأنها قد تُنتج "مستودع بيانات مهمل" - بيانات تبدأ من مصدر مشترك ثم تُهمل وتُترك دون استخدام يُذكر.
سوق البيانات المستقلة
يتم إنشاء مستودع بيانات مستقل دون وجود مستودع بيانات مركزي. يُعد هذا النوع من مستودعات البيانات خيارًا مثاليًا للمجموعات الصغيرة داخل المؤسسة.
لا يرتبط مستودع البيانات المستقل بمستودع بيانات المؤسسة أو بأي مستودع بيانات آخر. يتم تحميل بياناته وتحليلها بشكل مستقل. يتعارض هذا النهج مع السبب الرئيسي لإنشاء مستودع البيانات في المقام الأول: وهو توفير مخزن مركزي ومتسق لبيانات المؤسسة، يمكن للعديد من المستخدمين ذوي الاهتمامات المختلفة تحليله.
سوق البيانات الهجينة
يجمع مستودع البيانات الهجين مدخلات من مصادر خارج مستودع البيانات الرئيسي. وهذا مفيد عند الحاجة إلى تكامل مخصص، على سبيل المثال، بعد إضافة مجموعة أو منتج جديد إلى المؤسسة.
يُعدّ هذا النظام مناسبًا تمامًا لبيئات قواعد البيانات المتعددة، ويتميز بسرعة التنفيذ مع أقل جهد ممكن لتنظيف البيانات. كما يدعم مستودع البيانات الهجين هياكل التخزين الكبيرة، وهو مناسب أيضًا للتطبيقات الصغيرة التي تركز على البيانات.
خطوات تنفيذ Datamart
يُعدّ إنشاء مستودع بيانات عمليةً مُجزيةً ولكنها مُفصّلة. وهي تمر بخمس مراحل - التصميم، والإنشاء، والتعبئة، والوصول، والإدارة - وكل منها موصوف أدناه.
تصميم
التصميم هو المرحلة الأولى من تنفيذ مستودع البيانات. وهو يشمل كل مهمة بدءًا من الطلب الأولي لمستودع البيانات وحتى جمع المتطلبات، وينتهي بتصميم مستودع البيانات المنطقي والمادي.
تتضمن خطوة التصميم المهام التالية:
- جمع المتطلبات التجارية والتقنية وتحديد مصادر البيانات.
- اختيار المجموعة الفرعية المناسبة من البيانات.
- تصميم الهيكل المنطقي والمادي لسوق البيانات.
يمكن تقسيم البيانات بناءً على المعايير التالية:
- التاريخ
- وحدة أعمال أو وحدة وظيفية
- جغرافية
- أي مزيج من أعلاه
يمكن تقسيم البيانات على مستوى التطبيق أو نظام إدارة قواعد البيانات، مع أن التقسيم على مستوى التطبيق هو المُوصى به لأنه يسمح بنموذج بيانات مختلف كل عام مع تغير بيئة العمل. تُبنى معظم مستودعات البيانات على نموذج الأبعاد، مثل مخطط النجمة، للحفاظ على سرعة الاستعلامات.
ما هي المنتجات والتقنيات التي تحتاجها؟
يكفي قلم وورقة في هذه المرحلة. كما يمكن للأدوات التي تساعدك في إنشاء مخططات UML أو مخططات علاقات الكيانات أن تضيف بيانات وصفية إلى تصميماتك المنطقية والمادية.
بناء
البناء هو المرحلة الثانية من التنفيذ. ويتضمن إنشاء قاعدة البيانات المادية والهياكل المنطقية.
تتضمن هذه الخطوة المهمة التالية:
- تنفيذ قاعدة البيانات المادية المصممة في المرحلة السابقة - على سبيل المثال، إنشاء كائنات المخطط مثل الجداول والفهارس والعروض.
ما هي المنتجات والتقنيات التي تحتاجها؟
تحتاج إلى نظام إدارة قواعد بيانات علائقية (RDBMS) لإنشاء مستودع بيانات. يوفر نظام إدارة قواعد البيانات العلائقية العديد من الميزات الأساسية لنجاح مستودع البيانات:
- ادارة التخزين: يقوم نظام إدارة قواعد البيانات العلائقية (RDBMS) بتخزين البيانات وإدارتها، مما يتيح لك إنشاء السجلات وإضافتها وحذفها.
- الوصول السريع للبيانات: باستخدام استعلام SQL، يمكنك بسهولة استرداد البيانات بناءً على شروط أو عوامل تصفية محددة.
- حماية البيانات: يمكن لنظام إدارة قواعد البيانات العلائقية التعافي من أعطال النظام مثل انقطاع التيار الكهربائي واستعادة البيانات من النسخ الاحتياطية في حالة تعطل القرص.
- دعم متعدد المستخدمين: يوفر الوصول المتزامن، بحيث يمكن لعدة مستخدمين قراءة البيانات وتعديلها دون الكتابة فوق تغييرات بعضهم البعض.
- الأمن: ينظم هذا النظام المستخدمين الذين يمكنهم الوصول إلى أي كائنات والعمليات التي يمكنهم القيام بها.
السكان
في المرحلة الثالثة، يتم إدخال البيانات في مستودع البيانات.
تتضمن خطوة التعبئة المهام التالية:
- خريطةping بيانات المصدر إلى بيانات الهدف.
- Extracتحديد بيانات المصدر.
- تنظيف وتحويل البيانات.
- تحميل البيانات إلى مستودع البيانات.
- إنشاء وتخزين البيانات الوصفية.
ما هي المنتجات والتقنيات التي تحتاجها؟
يمكنك تنفيذ هذه المهام باستخدام ETL (مثال)tracأداة (تحويل، تحميل). تقوم بفحص مصادر البيانات، وإجراء عملية تحويل البيانات من المصدر إلى الهدف.pingثم extracيقوم بتحويل البيانات وتنظيفها وتحميلها إلى مستودع البيانات.
وعلى طول الطريق، تقوم الأداة أيضًا بإنشاء بيانات وصفية - تفاصيل مثل مصدر البيانات، ومدى حداثتها، والتغييرات التي تم إجراؤها، ومستوى التلخيص الذي تم تطبيقه.
الوصول
يُعد الوصول الخطوة الرابعة، وهي تُفعّل استخدام البيانات: الاستعلام عنها، وإنشاء التقارير والرسوم البيانية، ونشرها. يُرسل المستخدمون النهائيون الاستعلامات ويعرضون النتائج، غالبًا من خلال OLAP الأدوات.
تتضمن خطوة الوصول المهام التالية:
- إنشاء طبقة بيانات وصفية تترجم هياكل قواعد البيانات وأسماء الكائنات إلى مصطلحات تجارية، بحيث يمكن للمستخدمين غير التقنيين الوصول إلى مستودع البيانات بسهولة.
- إعداد وصيانة هياكل قواعد البيانات.
- إعداد واجهات برمجة التطبيقات (APIs) والواجهات إذا لزم الأمر.
ما هي المنتجات والتقنيات التي تحتاجها؟
يمكنك الوصول إلى مستودع البيانات باستخدام سطر الأوامر أو واجهة المستخدم الرسومية. وعادةً ما تُفضّل واجهة المستخدم الرسومية لأنها تُنشئ الرسوم البيانية بسهولة وتكون أكثر ملاءمة للمستخدم من سطر الأوامر.
إدارة
تُعدّ الإدارة المرحلة الأخيرة من عملية تنفيذ مستودع البيانات. وباستخدام واجهة المستخدم الرسومية أو سطر الأوامر، تتولى الفرق مهام الإدارة المستمرة مثل:
- إدارة وصول المستخدم المستمرة.
- تحسين النظام وضبطه بدقة لتحقيق أداء أفضل.
- إضافة وإدارة البيانات الجديدة في مستودع البيانات.
- تخطيط سيناريوهات التعافي للحفاظ على النظام متاحًا في حالة تعطلّه.
- التعافي من أعطال الأجهزة والبرامج مع الحفاظ على البيانات.
أفضل الممارسات لتنفيذ Data Marts
اتبع أفضل الممارسات التالية طوال عملية تنفيذ مستودع البيانات:
- قم بتنظيم مصدر مستودع البيانات حسب القسم.
- قم بقياس دورة التنفيذ بالأسابيع بدلاً من الأشهر أو السنوات.
- أشرك جميع أصحاب المصلحة في مرحلة التخطيط والتصميم، لأن تنفيذ مستودع البيانات يمكن أن يكون معقدًا.
- ضع ميزانية دقيقة لتكاليف أجهزة وبرامج وشبكات وتنفيذ مستودع البيانات.
- حتى عندما تتشارك مستودعات البيانات في الأجهزة، فقد تحتاج إلى برامج مختلفة للتعامل مع استعلامات المستخدمين؛ قم بتقييم قوة المعالجة الإضافية والتخزين اللازمين للاستجابات السريعة.
- عندما يكون مستودع البيانات موجودًا في موقع مختلف عن مستودع البيانات الرئيسي، تأكد من وجود سعة شبكة كافية لنقل أحجام البيانات المطلوبة.
- ضع في اعتبارك وقت التحميل، الذي يزداد مع ازدياد تعقيد عمليات التحويل.
مزايا وعيوب سوق البيانات
مثل أي خيار معماري، يوفر مستودع البيانات فوائد واضحة إلى جانب بعض المقايضات.
المزايا
- يحتوي مستودع البيانات على مجموعة فرعية من البيانات على مستوى المؤسسة والتي تعتبر ذات قيمة لمجموعة محددة من المستخدمين.
- إنه بديل فعال من حيث التكلفة لمستودع البيانات، والذي قد يكون بناؤه مكلفًا.
- يُتيح مستودع البيانات الوصول إلى البيانات بشكل أسرع.
- إنه سهل الاستخدام، لأنه مصمم لتلبية الاحتياجات المحددة لمستخدميه، مما يمكن أن يسرع عمليات الأعمال.
- يحتاج مستودع البيانات إلى وقت تنفيذ أقل من مستودع البيانات، لأنك تركز فقط على مجموعة فرعية من البيانات.
- يحتوي على بيانات تاريخية تساعد المحللين على تحديد الاتجاهات.
عيوب
- تقوم المؤسسات أحيانًا بإنشاء عدد كبير جدًا من مستودعات البيانات المتباينة وغير ذات الصلة، مما يجعل صيانتها أمرًا صعبًا.
- لا يمكن لمستودع البيانات توفير تحليل بيانات على مستوى الشركة بأكملها، لأن مجموعة بياناته محدودة.
