تقدم هذه الدراسة منهجًا مقترحًا لمعالجة البيانات الضخمة يتجاوز قصور الطرائق التقليدية القائمة على إنشاء العناقيد واستخراج البيانات بالاستعلامات والتي تفشل في تحقيق نتائج دقيقة على الشبكات الهائلة، ويعتمد المنهج المقترح على نظام هادوب للملفات الموزعة في معالجة البيانات وعلى نموذج البرمجة خريطة واختزال وعلى تقنيات تحسين الاستعلامات لاستخراج نتائج دقيقة بسرعة وفاعلية من خيارات متعددة وبقدرة معالجة عالية، كما يوظف نموذج الخليط الغاوسي في عنقدة البيانات وخوارزمية سرب السالب في التحسين، ويؤمن البيانات المعالجة مسبقًا والمحفوظة على عناقيد شبكية مترابطة بواسطة خوارزميات التجزئة الآمنة قبل توليد نتائج تقويم الأداء التجريبي للنموذج وفق معالم مهمة معتبرة
أولًا: أهداف الدراسة ومنهجيتها
تهدف الدراسة إلى بناء خط معالجة متكامل للبيانات الضخمة يجمع بين التخزين الموزع والعنقدة الاحتمالية والتحسين الاسترشادي، فتتولى بنية هادوب توزيع الملفات ومعالجتها على عقد العنقود، ويتولى نموذج الخليط الغاوسي تجميع البيانات في عناقيد تراعي التداخل الاحتمالي بينها، بينما تعمل خوارزمية سرب السالب المستوحاة من سلوك أسراب كائنات السالب البحرية على تحسين الحلول وضبط المعالم، وتشمل المنهجية تأمين البيانات المعالجة بخوارزميات التجزئة الآمنة ثم تقويم الأداء تجريبيًا على ملفات إدخال تراوحت أحجامها بين ستين ومئة ميغابايت، مع مقارنة النتائج بطرائق معروفة كخوارزمية المتوسطات كيه والمتوسطات الضبابية سي لبيان موضع المنهج المقترح من الأداء السائد
ثانيًا: أبرز النتائج
أظهرت نتائج التقويم أن معالجة ملفات إدخال بحجم مئة ميغابايت حققت دقة بلغت ستًا وتسعين في المئة ونتائج نوعية بلغت تسعين في المئة وحساسية بلغت ثلاثًا وتسعين في المئة، وبالمقارنة مع الطرائق المعروفة كالمتوسطات الضبابية سي والمتوسطات كيه تبين أن الطريقة المقترحة توزع معالجة البيانات الدقيقة على عقد العناقيد بزمن تأخير منخفض، وتستخدم أقل قدر ممكن من موارد الذاكرة أثناء عملها على معالجات عاملة، وبذلك تتفوق المقاربة الهجينة على التقنيات القائمة في التوازن بين دقة النتائج وكفاءة استهلاك الموارد، وهو توازن حاسم في بيئات البيانات الضخمة التي تتعاظم فيها كلفة كل نقطة مئوية من الهدر الحاسوبي
ويقوم اختيار نموذج الخليط الغاوسي للعنقدة على ملاءمته لطبيعة البيانات الضخمة المتداخلة إذ يمنح كل عنصر احتمالات انتماء متدرجة إلى العناقيد بدل الحسم القاطع الذي تفرضه طرائق التقسيم الصلب، فيما تتولى خوارزمية سرب السالب استكشاف فضاء الحلول الممكنة بذكاء جماعي يحاكي حركة الأسراب البحرية بحثًا عن المواضع الأفضل، فيجتمع في المنهج تمثيل احتمالي مرن للبيانات وبحث تحسيني فعال عن أفضل إعدادات التشغيل الممكنة
ثالثًا: دلالات الدراسة وتطبيقاتها
تتجه دلالات هذه الدراسة إلى مهندسي البيانات ومطوري أنظمة المعالجة الموزعة والباحثين في الحوسبة عالية الأداء، فهي تقدم وصفة قابلة لإعادة التنفيذ تجمع أدوات ناضجة كمنظومة هادوب بنماذج عنقدة احتمالية وخوارزميات تحسين مستوحاة من الطبيعة، وتبرهن على أن الهجين المدروس بين هذه المكونات يرفع الدقة ويخفض زمن التأخير واستهلاك الذاكرة في آن واحد، كما تنبه إلى أهمية تضمين التأمين بالتجزئة ضمن خط المعالجة نفسه لا بوصفه طبقة لاحقة، وتظل قابلية المنهج للتوسع نحو أحجام بيانات أكبر بكثير من نطاق الاختبار الحالي وبيئات سحابية موزعة جغرافيًا مسألة مفتوحة للبحث اللاحق، ومن ثم تمثل الدراسة إسهامًا تطبيقيًا في تطوير معالجة البيانات الضخمة على الشبكات الواسعة
وتشير نتائج انخفاض زمن التأخير واستهلاك الذاكرة إلى جدوى اقتصادية مباشرة للمؤسسات التي تعالج بيانات ضخمة ببنى تحتية محدودة الموارد، إذ يتيح المنهج استثمار العقد الحاسوبية المتاحة بكفاءة أعلى بدل التوسع المكلف في العتاد، كما أن تضمين التأمين بالتجزئة داخل خط المعالجة يعالج قلقًا متزايدًا حول سلامة البيانات المخزنة على عناقيد مترابطة تتوزع عليها أجزاء الملفات ونسخها عبر الشبكة
وتعرض الدراسة نتائج الأداء التجريبي عبر معالم تقويم متعددة لا تقتصر على الدقة وحدها بل تشمل النوعية والحساسية وزمن التأخير واستهلاك الذاكرة، بما يرسم صورة متكاملة عن سلوك المنهج المقترح تحت أحجام إدخال متزايدة في بيئات الشبكات الواسعة
وخلاصة القول إن المنهج الهجين القائم على نموذج الخليط الغاوسي وخوارزمية سرب السالب فوق بنية هادوب الموزعة حقق في اختبارات الدراسة دقة بلغت ستًا وتسعين في المئة مع زمن تأخير منخفض واستهلاك ذاكرة محدود، متفوقًا على طرائق المتوسطات الضبابية والمتوسطات كيه، وتفتح هذه النتائج الطريق أمام فرق البيانات الضخمة لاعتماد تركيبات هجينة مشابهة توازن بين الدقة والكفاءة في معالجة شبكات البيانات المتنامية
