ما هي بحيرة البيانات يستخدم هذا المصطلح على نطاق واسع من قبل الأشخاص الذين يدرسون علوم البيانات والتحليلات، وهذا المصطلح مهم جدًا للأشخاص الذين يشاركون في إدارة البيانات. بالإضافة إلى مكونات وفوائد بحيرة البيانات.
ما هي بحيرة البيانات
بحيرة البيانات هي مستودع تخزين مركزي يحتوي على بيانات ضخمة من العديد من المصادر بتنسيق خام وحبيبي ويخزن كلاً من البيانات المهيكلة (البيانات المهيكلة) وشبه المهيكلة (البيانات غير المهيكلة) بهدف الاحتفاظ بالبيانات بتنسيق أكثر مرونة للمستقبل تستخدم عند تخزين البيانات تقوم بحيرة البيانات بربطها بالمعرفات وعلامات البيانات الوصفية لاسترجاعها بشكل أسرع.
تمت صياغة مصطلح “بحيرة البيانات” بواسطة جيمس ديكسون، كبير مسؤولي التكنولوجيا في Pentaho، لأن المصطلح يشير إلى الطبيعة المخصصة للبيانات في تلك البحيرة. لأغراض التطوير، يسمح هذا التكوين بإلقاء البيانات في البحيرة إذا كان هذا هو الحالة، ستكون هناك حاجة إليها لاحقًا دون الحاجة إلى القلق بشأن سعة التخزين. يمكن أن توجد المجموعات في الموقع أو في السحابة.[1]
من هو مؤسس المخيم
ما هو مستودع البيانات
مستودع البيانات عبارة عن مجموعة كبيرة من بيانات الأعمال التي تساعد المؤسسة على اتخاذ القرارات، ومفهوم مستودع البيانات موجود منذ الثمانينيات حيث يهدف إلى نقل البيانات من العمليات إلى أنظمة دعم القرار التي تكشف عن ذكاء الأعمال. توجد البيانات في مستودعات البيانات من مواقع مختلفة، مثل التطبيقات الداخلية في التسويق والمبيعات والتمويل والتطبيقات الموجهة للعملاء وأنظمة الشركاء الخارجيين.
على المستوى التقني، يقوم مخزن البيانات باستدعاء البيانات بانتظام من هذه التطبيقات والأنظمة ؛ تمر البيانات بعد ذلك عبر عمليات التنسيق والاستيراد لمقارنتها بالبيانات الموجودة بالفعل في المستودع. يقوم مستودع البيانات بعد ذلك بتخزين البيانات المعالجة بحيث تكون متاحة لمتخذي القرار. يختلف عدد مرات حدوث عمليات سحب البيانات أو كيفية تنسيق البيانات وفقًا لاحتياجات المؤسسة.[2]
الفرق بين بحيرة البيانات ومستودع البيانات
تتطلب المنظمة النموذجية استخدام كل من مستودع البيانات وبحيرة البيانات لتلبية الاحتياجات المختلفة وحالات الاستخدام، ويتم التمييز بين كل من هذه المصطلحات من خلال[3]
<tbody> </tbody>
الاختلاف |
بحيرة البيانات |
مستودع البيانات |
البيانات |
تكون البيانات التي تحتوي عليها أكثر شمولاً إذا لم تكن علائقية وعلائقية في نفس الوقت – أي أنها مرتبطة بأجهزة إنترنت الأشياء ومواقع الويب وتطبيقات الهاتف المحمول والوسائط الاجتماعية وتطبيقات المؤسسات |
تكون البيانات علائقية فقط عندما تأتي من أنظمة المعاملات وقواعد البيانات التشغيلية وتطبيقات الأعمال |
رسم بياني |
الرسم التخطيطي مكتوب في وقت التحليل (رسم بياني عند القراءة) |
تم إنشاء المخطط قبل تنفيذ DW (خطة الكتابة) |
قيمة المال |
تصبح نتائج الاستعلام أسرع مع التخزين غير المكلف |
ستحصل على نتائج استعلام أسرع باستخدام ذاكرة أكثر تكلفة |
جودة البيانات |
إذا كانت البيانات أولية، فقد يتم تنسيقها أو لا. |
بالنسبة للبيانات عالية التنظيم، فإنها تعمل كنسخة مركزية للحقيقة |
المستعمل |
أولئك الذين يستخدمون بحيرة البيانات هم العلماء ومطورو البيانات ومحللو الأعمال (مع بيانات غنية) |
يستخدم محللو الأعمال مستودعات البيانات فقط |
تحليلات |
التحليلات هي التعلم الآلي والتحليلات التنبؤية واكتشاف البيانات والتنميط |
تأخذ التحليلات شكل التقارير المجمعة وذكاء الأعمال والتصورات |
مكونات بحيرة البيانات
يكمن مفتاح كفاءة الشركات في الاستخدام الكامل لبحيرة البيانات واعتمادها على كيفية معالجتها وتفسيرها للكم الهائل من المعلومات، ولا سيما سرعة نقل البيانات إلى بحيرات البيانات واستخراج الأفكار منها. والتي تتكون من خمسة مكونات رئيسية وهي كالتالي[4]
- استيعاب البيانات هذا الإجراء مطلوب لتنفيذ نظام قائم على الوعي والوعي للحصول على استيعاب قابل للتوسع بدرجة كبيرة لاستخراج البيانات من مصادر مختلفة يتم استخلاصها عادةً من مواقع الويب والتطبيقات جنبًا إلى جنب مع وسائل التواصل الاجتماعي والطرق الأخرى التي يتم تنزيلها على الأجهزة المحمولة الأخرى التي يجب أن يدعم جميع أنواع البيانات بمصادر البيانات الحديثة.
- التخزين الذي يجب أن يحتوي على نظام تخزين تدريجي يتمتع بقدرة عالية على تخزين ومعالجة البيانات الخام وفك التشفير والدعم، مع إمكانية الضغط دون المساس بأمن البيانات وحفظها بشكل مناسب.
- أمن البيانات الشرط الأساسي هو تأمين بحيرة البيانات بشكل فعال من خلال المصداقية متعددة العوامل وإجراءات التفويض وإمكانية الوصول الآمن وحماية البيانات.
- تحليل البيانات بعد تسجيل البيانات، بالإضافة إلى نقل البيانات التي تم فحصها مسبقًا إلى مستودع البيانات، يجب أن تخضع لعملية تحليل عالية الكفاءة مع أدوات التحليل والتعلم الآلي من أجل الحصول على رؤى قيمة.
- إدارة البيانات ويشمل ذلك تبسيط عملية استيعاب البيانات وإعدادها وفهرستها ودمجها، وتسريع الاختبار لإنتاج بيانات عالية الجودة على مستوى الفرد والمؤسسة، ويجب مراقبة التغييرات على عناصرها وإعدادها للاختبار. .
راجع أيضًا ما هي خطة التعافي من الكوارث
فوائد بحيرة البيانات
عادة ما يتعين على الشركات اتخاذ قرارات بناءً على البيانات المتاحة دائمًا، فنحن بحاجة ماسة إلى بيانات الشركة بأكملها من أجل الخروج بالكامل من أجل اتخاذ القرارات الصحيحة في العمل، ويعتمد اتخاذ القرار هذا على معرفتنا السابقة أهمية وفائدة بحيرة البيانات والتي سنقدمها لك على النحو التالي[5]
- سعة التخزين لها القدرة على تخزين كميات كبيرة دون إتلافها أو إتلافها.
- سهولة الاستخدام بمجرد حصولك على البيانات في البحيرة، يمكنك استخدامها بشكل أسرع من خلال إبقائها في حالتها الأولية.
- اكتساب رؤى يمكنك اكتساب رؤى جديدة وغير متوقعة من خلال التحليل الأكثر شمولاً واستخدام أحدث الأساليب.
- قابلية التوسع إنها أكثر قابلية للتوسع مقارنة بمستودع البيانات وأقل تكلفة عندما نأخذها في الاعتبار.
بهذا القدر من المعلومات وصلنا إلى نهاية مقالتنا بعنوان ما هي بحيرة البيانات، حيث تعرفنا أيضًا على مستودع البيانات والفرق بينهما، إلى جانب ذكر مكوناته وما هو في العمق، الفوائد، للترفيه عن أفكار قرائنا الأعزاء بأي شيء يتعلق بهذا الموضوع.
