》7.11分布式并行编程 问题:在 MapReduce出现之前,已经有像MP这样非常成熟的并行计算框架 了,那么为什么 Google还需要 MapReduce? Map Reduce相较于传统的并行 计算框架有什么优势? 传统并行计算框架 Map Reduce 集群架构/容错性共享式(共享内存/共享存储),容非共享式,容错性好 错性差 硬件/价格/扩展性刀片服务器、高速网、SAN,普通PC机,便宜,扩展 价格贵,扩展性差 性好 编程/学习难度What-hoW,难 What,简单 适用场景 实时、细粒度计算、计算密集型批处理、非实时、数据密 集型 大数据技术原理与应用(第3 厦门大学计算机科学系 林子雨 ziyulin@xmu.edu.cn《大数据技术原理与应用（第3版）》 厦门大学计算机科学系 林子雨 ziyulin@xmu.edu.cn 7.1.1分布式并行编程 问题：在MapReduce出现之前，已经有像MPI这样非常成熟的并行计算框架 了，那么为什么Google还需要MapReduce？MapReduce相较于传统的并行 计算框架有什么优势？ 传统并行计算框架 MapReduce 集群架构/容错性 共享式(共享内存/共享存储)，容 错性差 非共享式，容错性好 硬件/价格/扩展性 刀片服务器、高速网、SAN， 价格贵，扩展性差 普通PC机，便宜，扩展 性好 编程/学习难度 what-how，难 what，简单 适用场景 实时、细粒度计算、计算密集型 批处理、非实时、数据密 集型