MapReduce وHadoop وSpark (معالجة البيانات الضخمة)

نموذج برمجة للمهام الدفعية المتوازية على عناقيد من الأجهزة الرخيصة؛ جعله Hadoop مفتوح المصدر وأطلق صناعة «البيانات الضخمة».

البيانات والسحابة والأمنبرمجيات
  1. 2004

    النسخة الأولى

    جيفري دين وسانجاي غيماوات (Google)؛ Hadoop من دوغ كاتينغ ومايك كافاريلا؛ Spark من ماتي زهاريا (جامعة كاليفورنيا في بيركلي)

    الصورة: Google Inc. (logo by Ruth Kedar, 1999) · Unclear; no licence stated (Google trad… · google.com home page logo file, Wayback Machine…
  2. 2006

    مشروع Apache Hadoop

    MapReduce وHDFS مفتوحا المصدر، توسّعا في Yahoo، ونشرا عناقيد البيانات الضخمة.

    الصورة: Apache Software Foundation · Apache License 2.0 · Wikimedia Commons
  3. 2010

    الإصدار البحثي لـSpark

    مجموعات البيانات الموزعة المرنة في الذاكرة تجعل التحليلات التكرارية أسرع بكثير من MapReduce.

    الصورة: Apache Software Foundation · Apache License 2.0 · Wikimedia Commons
  4. 2011

    معالجة البيانات المتدفقة مع Apache Kafka

    LinkedIn تفتح مصدر سجل موزّع ينقل معالجة البيانات الضخمة من الدفعات الليلية إلى تدفقات فورية مستمرة.

    الصورة: ™/®Apache Software Foundation · Apache License 2.0 · Wikimedia Commons

شاهده على الخط الزمني