Í 2004 birti Google ritgerð um ferli sem heitir MapReduce sem notar svipað arkitektúr. MapReduce hugmyndafræði veitir samhliða vinnslu líkan, og tengd framkvæmd var gefin út til að vinna með gríðarlegt magn af gögnum. Með MapReduce eru fyrirspurnir skipt og dreift yfir samhliða hnúta og unnin samhliða (Mapp skref). Niðurstöðurnar eru síðan safnaðar og afhentar (Reduce skref). Ramminn var mjög árangursríkur, svo aðrir vildu endurtaka reikniformin. Þess vegna var framkvæmd MapReduce ramma samþykkt af Apache opnum uppsprettaverkefni sem heitir Hadoop. Apache Spark var þróað árið 2012 í viðbrögð við takmörkunum í MapReduce fyrirmynd, þar sem það bætir getu til að setja upp margar kort aðgerðir (ekki bara með því að minnka). Spurning: Hver var hugmyndin um að bæta nýja gagnavinnslu?
samhliða vinnslu líkan