MapReduce简介

5.1 MapReduce简介MapReduce 是hadoop的一个核心组成框架，使用该框架编写的应用程序能够以一种可靠的、容错的的方式并行处理大型集群（数千个节点）上的大量数据（TB级别以上），也可以对大数据进行加工，挖掘等优化处理。一个 MapReduce 任务主要包括两部分：Map任务和Reduce任务。Map任务负责对数据的获取、分割与处理，其核心执行方法为map（）方法。**MapReduce** 将并行计算过程高度抽象了 map() 方法和 reduce 方法中，程序员只需要负责这两个