"البيانات الضخمة Big Data:
ما هي مصادر البيانات الضخمة؟
تقنيات البيانات الضخمة:
مما تتكون الأدوات التي تتعامل مع البيانات الضخمة؟
الأطراف في منظومة البيانات الضخمة:
البيانات الضخمة Big Data:

 

هي عبارة عن مجموعة من البيانات التي تعتبر بحجم هائل، فهي تفوق بذلك قدرة برامج قواعد البيانات العادية على معالجتها وتحليلها، ليتم نقلها بعد ذلك وتخزينها، حيث يتم إدارتها و تحليلها في غضون فترات زمنية قصيرة لهذا الحجم الهائل من البيانات؛ و من وجهة نظر مقدمي الخدمات، هي الأدوات والعمليات التي تحتاجها المنظمات للتعامل مع كمية كبيرة من البيانات لغرض التحليل. فهي بذلك بيانات هائلة لا يمكن معالجتها بالطرق التقليدية في ظل القيود، وتعمل البيانات الضخمة الآن كمساعد حقيقي وفعال فى معالجة أهم القضايا التي تواجه البشرية.

 

ما هي مصادر البيانات الضخمة؟

 

تتوفر هناك الكثير من مصادر البيانات الضخمة منها المصادر الناتجة عن إدارة أحد البرامج، سواء كانت هذه البرامج حكومية أو غير حكومية، ومن ذلك السجلات الطبية الإلكترونية، والتي تشمل مجموع الزيارات للمستشفيات وسجلات التأمين، وكذلك السجلات المصرفية وبنوك الطعام وغيرها. وأما المصادر التجارية أو ذات الصلة بالمعاملات، فإنها تُعد مصدراً آخر كالبيانات الناشئة عن معاملات بين كيانين، على سبيل المثال معاملات البطاقات الائتمانية والمعاملات التي تجرى عن طريق الإنترنت بوسائل منها الأجهزة المحمولة.

 

كما أن هناك مصادر معتمدة على تقنيات إنترنت الأشياء التي تشمل جميع الأجهزة التي يمتلكها المستخدمين، وكما تشمل بذلك شبكات أجهزة الاستشعار وأجهزة التتبع، فعلى سبيل المثال، التصوير بالأقمار الصناعية، وأجهزة استشعار الطرق، وأجهزة استشعار المناخ وتتبع البيانات المستمدة من الهواتف الذكية، والنظام العالمي لتحديد المواقع وغيرها، حيث يمكن أن تكون أحد مصادر البيانات الضخمة.

 

وهناك نوع آخر من المصادر وهو المعتمد على سلوك المستخدم مثل مرات البحث على الإنترنت عن منتج أو خدمة معينة، أو أي نوع آخر من المعلومات، ومرات مشاهدة إحدى الصفحات على الإنترنت، وأخيرا، مصادر البيانات المتعلقة بالآراء مثل التعليقات على وسائط التواصل الإجتماعي مثل فيسبوك وتويتر وغيرها.

 

تقنيات البيانات الضخمة:

 

يتوفر هناك العديد من الأدوات والتقنيات التي يتم استخدامها لتحليل البيانات الضخمة مثل: (Hadoop ،Map Reduce ،HPCC) إلا أنّ أداة (Hadoop) تُعد من أبرز هذه الأدوات، فهي عبارة عن برنامج أو منصة برمجية مفتوحة "