写点什么

架构师训练营十二周作业

用户头像
方堃
关注
发布于: 2020 年 09 月 02 日

2.分析如下HiveQL,生成的mapReduce执行程序,map函数输入输出是什么?reduce函数输入输出是什么

map输入是key:userid,value:<表来源,自定值>

输出即是 111,<1,1>;111,<1,2>;222,<1,1>;111,<2,25>;222,<2,32>

reduce输入是,map的输出洗牌、按照userid划分的值

111,<1,1>;111,<1,2>;111,<2,25>;

222,<1,1>;222,<2,32>

reduce的输出是遍历输入值,按照表来源区分,若有差异则合并输出一次

因此输出为

1,25;2,25

1,32



用户头像

方堃

关注

还未添加个人签名 2019.02.11 加入

还未添加个人简介

评论

发布
暂无评论
架构师训练营十二周作业