البيانات الضخمة ( البيج داتا ) أصبحت ذات أهمية كبرى لجميع اقتصادات الدول المتقدمة أو التى تسعى للنهوض باقتصادها من خلال التسارع الرقمى والاعتماد على التكنولوجيا الحديثة واللحاق بركب الثورة الصناعية الرابعة بل إنها تمثل ثروة قومية لاتنفذ أى أنها تفوق الثروات الطبيعية ولهذا تسعى وزارة الاتصالات وتكنولوجيا المعلومات لوضع خطة طموحة للاستثمار فى هذا المجال من خلال التعاقد مع كبريات الشركات العالمية لتدريب وتأهيل مئات الشباب لنقل تكنولوجيا تأسيس مراكز البيانات الضخمة .
موضوعات مقترحة
و تمثل لها البيانات الضخمة الذراع الأيمن فتلك البيانات يعتمد عليها الذكاء الاصطناعي وكل التقنيات الحديثة والبيانات الضخمة بيانات كبيرة ومتباينة ومتنوعة وديناميكية حيث تنشأ وتنتج بواسطة الاشخاص والأدوات والألات والأجهزة والطائرات ومراكز الابحاث والمراصد الكونية والفلكية .
وفى هذا الصدد تسعى وزارة الاتصالات وتكنولوجيا المعلومات إلى بناء مصر الرقمية وتحويل المجتمع المصري إلى مجتمع رقمي، من خلال إنشاء بنية تحتية آمنة وموثوق بها ويسهل الوصول إليها .
وتولي الوزارة أهمية قصوى لصيانة البنية التحتية القوية والملائمة، كما تهتم بالتطور والتقارب التكنولوجي ووضع الأطر التنظيمية التي تساعد على خلق مناخ استثماري جيد مما يشجع نمو قطاع الاتصالات وتكنولوجيا المعلومات
وفى هذا الصدد أعلنت وزارة الاتصالات وتكنولوجيا المعلومات عن بدء التقدم لمنحة للحصول على الشهادات الاحترافية المعتمدة من شركة أمازون ويب سرفيسز(AWS) فى مجالات علوم البيانات والبيانات الضخمة
(big data & data analytics
حيث تهدف المنحة الى صقل مهارات 500 شاب متخصص فى هذه المجالات بما يعزز من قدرتهم على تلبية احتياجات سوق العمل وخدمة المشاريع القومية.
والمنحة تهدف إلى تخريج جيل جديد من المتخصصين فى علوم البيانات بشهادة معتمدة عالميا، وتزويد أسواق تكنولوجيا المعلومات فى مصر والشرق الأوسط وأفريقيا بعلماء البيانات من أصحاب الخبرات العملية، والارتقاء بمهارات العاملين بالمؤسسات الصغيرة والمتوسطة فى مصر لزيادة قدرتهم على المشاركة بفاعلية فى مشروعات مصر الرقمية، بالإضافة الى تحفيز الشركات الناشئة الجديدة للتركيز على توفير حلول البيانات الضخمة وتحليل البيانات.
كما وقعت هيئة تنمية صناعة تكنولوجيا المعلومات "ايتيدا"، ومجموعة جوسفون العاملة في مجال البيانات العملاقة، بهدف إنشاء فرع للشركة في مصر يتضمن مركز تميز لتصدير خدمات تكنولوجيا المعلومات
وتبلغ مدة العمل بمذكرة التفاهم 3 سنوات تقوم خلالها الشركة بتعيين 300 من الشباب المصري في المرحلة الأولى في وظائف متخصصة، وتنص مذكرة التفاهم على أن تقوم هيئة تنمية صناعة تكنولوجيا المعلومات بتقديم الدعم اللازم لتيسير عمل الشركة والوصول إلى المهارات المتخصصة للعمل بمقرها في مصر والذي تستهدف من خلاله تصدير خدمات البحث والتطوير، وتطوير البرمجيات والتطبيقات، والبحوث المتعلقة بالذكاء الاصطناعي وتطوير التطبيقات ذات الصلة .
وتتميز البيانات الضخمة أن انتاجها وفير وبغزارة تزداد كل ثانية فمثلا يتم انتاج التالي على سبيل المثال من 9000 تغريدة على تويتر في الثانية الواحدة وأكثر من 1000 صورة على الانستجرام في الثانية الواحدة وأكثر من 85000 عملية بحث على جوجل في الثانية الواحدة وأكثر من 8000 فيديو على اليوتيوب يتم رفعه في الثانية الواحدة وكثر من 2 مليون ايميل في الثانية الواحدة وكثر من 80 مليار رسالة على الواتس يوميا وأكثر من 2.8 مليار مستخدم نشط شهريا و 1.84 مليار مستخدم نشط يوميا على الفيس بوك بلغت عدد الصور على الفيس بوك 350 مليار صورة
أكثر من 4 مليون إعجاب كل دقيقة على الفيس بوك وأكثر من 3 مليار مستخدم للإنترنت
كما تتطلب تقنيات جديدة ومبتكرة للتخزين والاسترجاع والتطوير والادارة والتحليل أنه منذ ألاف السنين يقوم الانسان بتدوين حاضره وماضيه وتاريخه على الحوائط والجدران والمعابد والكهوف والمقابر والجلود والأوراق وقد انتجت البشرية منذ فجر التاريخ حتى 2003م 5 مليارات جيجا بايت
وفي عام 2011 م كان يتم انتاج 5 مليارات جيجا بايت كل يومين وفي عام 2013 تم انتاج 5 مليارات جيجا كل 10 دقائق
الملفت للنظر أن 90 % من البيانات للعالم انتجت خلال السنتين الماضيتين فقط لذا فإن البيانات الضخمة أصبحت من الموارد الهامة التي تتميز بالوفرة على عكس الموارد التقليدية الطبيعية والتي تتميز بالندرة وأتوقع بأن النظريات الاقتصادية ستتعرض الى اعادة نظر للمعايير والأسس التي بنيت عليها .
وتتميز البيانات الضخمة بمجموعة من الخاصائص السرعة : وهي سرعة تدفق البيانات التي تصل إلينا على سبيل المثال، أن كل ٦٠ ثانية يتم تحميل ساعات من اللقطات على يوتيوب الذي ينتج بيانات. فمن الممكن تخيل سرعة تراكم البيانات في الساعة أو اليوم أو الشهر وهكذا.
والحجم : حيث يزيد حجم البيانات مما يُعيق معالجتها بالطرق العادية. وهذه الزيادة بسبب تعدد مصادر البيانات وأجهزة الاستشعارات عالية الدقة والبنية التحتية القابلة للتطوير. يستخدم الناس في العالم غالبًا كل أنواع الأجهزة من تليفون وكمبيوتر وساعة رقمية ......ألخ . وأصبح حجم البيانات لدينا يصل إلى ٢,٥ كوينتليون بايت يوميًا ما يعادل أكثر من ١٠ مليون قرص(DVDs). . وهذه البيانات في تزايد مستمر كل ثانية الآن .
والتنوع : تتنوع البيانات على شكل صور أو فيديوهات أو أرقام أو تغريدات ومنشورات. حيث يزداد تنوع البيانات بسبب دخول عدد كبير من التكنولوجيات الجديدة للتليفون ووسائل التواصل الاجتماعي والفيديو وغيرها.
والصدق : حيث نوعية وأصل البيانات وتطابقها مع الحقائق والوقائع والاكتمال والنزاهة. وتتكلف الشركات مبالغ ومجهودات عالية ويزداد تتبع البيانات وتحري الدقة دائمًا للتأكد من المصداقية. و٨٠٪ من البيانات تقريبا غير منتظمة، لذلك يجب دائمًا ابتكار طرق لتنظيم وترتيب واستكمال وتحليل وتكامل ودمج البيانات.
.
كل هذه البيانات في الماضي القريب كانت تنتج من وثائق وملفات شخصية من الشركات وبعض الجهات الحكومية والمجتمع المدني والأن يتم انتاج بيانات اكثرضخامة وكثافة من كل شيء تقريبا مقارنة بالعصر الماضي وتتزايد قيمة تلك البيانات للحد الذى فاقت فيه قيمتها النفط والذهب والموارد الطبيعية
البيانات الضخمة Big data والتي وصل حجمها الى أكثر من 40 ألف تريليون جيجا ( 40 زيتا بايت ) ومن المتوقع ان تصل الى 180 ألف تريليون جيجا ( 180 زيتا بايت ) ، تقربيا مايعادل 180 الف تريليون كتاب من الحجم المتوسط .
وقياس حجم البيانات يكون بالبايت وهو أصغر وحدة في قياس حجم البيانات بمعيار تقريبا حرف والبايت مكون من 8 بت ، لذا فإن هذا الحجم الهائل من البيانات لابد ان يتم تخزينه وحفظه على أجهزة كمبيوتر عملاقة تستوعب كل هذا الانتاج المتزايد في كل ثانية بشكل كبير وأيضا محاكاة سرعة هذه البيانات في التخزين والاسترجاع .
والبيانات الضخمة متنوعة ويتم تخزينها في صورة ملفات حيث بلغ عدد أنواع الملفات للبيانات الى 18 ألف نوع و تطبيقات واستخدامات هذه البيانات في مختلف المجالات بعد معالجتها والتحقق والتحليل وفقا لمعايير احصائية ورياضية ومهنية