正在加载图片...
71.3Map和 Reduce函数 表7-1Map和 Reduce 函数输入 输出 说明 Mar Lis(<k2,2)1将小数据集进一步解析成一批 行号2be>如 如 ckey, value>对,输入Map函数中进行 处理 2每一个输入的<k1,v1>会输出一批 <k2,v2>。<k,2是计算的中间结果 Reduce <k2, List(v2)><k3,v 输入的中间结果<k2,Lis(n2)>中的 如 List(2)表示是一批属于同一个k2的 <a,<1,1,l>> value 大数据技术原理与应用(第3 厦门大学计算机科学系 林子雨 ziyulin@xmu.edu.cn《大数据技术原理与应用(第3版)》 厦门大学计算机科学系 林子雨 ziyulin@xmu.edu.cn 7.1.3Map和Reduce函数 函数 输入 输出 说明 Map <k1 ,v1> 如: <行号,”a b c”> List(<k2 ,v2>) 如: <“a”,1> <“b”,1> <“c”,1> 1.将小数据集进一步解析成一批 <key,value>对,输入Map函数中进行 处理 2.每一个输入的<k1 ,v1>会输出一批 <k2 ,v2>。<k2 ,v2>是计算的中间结果 Reduce <k2 ,List(v2 )> 如: <“a”,<1,1,1>> <k3 ,v3> <“a”,3> 输入的中间结果<k2 ,List(v2 )>中的 List(v2 )表示是一批属于同一个k2的 value 表7-1 Map和Reduce
<<向上翻页向下翻页>>
©2008-现在 cucdc.com 高等教育资讯网 版权所有