Wednesday, September 03, 2014

На смерть Map-Reduce

Патетический материал о кончине применения Map-Reduce в Google. Соответственно, и для Hadoop Map-Reduce уже не является эксклюзивным фреймворком. Apache Spark, например, использует Directed Acyclic Graph. Вот здесь, например, можно прочитать про преимущества Spark по сравнению с MapReduce (отсутствие синхронизации).

P.S. вот в связи с этой статьей нашлась связанная с ней дискуссия о распределенных файловых системах

P.P.S. из других альтернативных (по отношению к MapReduce) систем см., например, Apache Hama и графовую модель GPS

No comments: