Passage: Mwaka 2004, Google ilichapisha karatasi juu ya mchakato unaoitwa MapReduce ambayo hutumia usanifu sawa. Dhana ya MapReduce hutoa mfano wa usindikaji sambamba, na utekelezaji unaohusiana ulitolewa kusindika data nyingi. Kwa MapReduce, maswali yanagawanywa na kusambazwa kwa nodes sambamba na kusindika sambamba (hatua ya Ramani). Matokeo kisha hukusanywa na kutolewa (hatua ya Kupunguza). Mfumo huo ulikuwa na mafanikio sana, kwa hivyo wengine walitaka kuiga algorithm. Kwa hivyo, utekelezaji wa mfumo wa MapReduce ulipitishwa na mradi wa chanzo wazi wa Apache uitwao Hadoop. Apache Spark ilitengenezwa mnamo 2012 kujibu mapungufu katika mfano wa MapReduce, kwani inaongeza uwezo wa kuanzisha shughuli nyingi za ramani (sio tu kwa kupunguza). Swali: Wazo lilikuwa nini kuboresha data mpya?
sambamba usindikaji mfano