架构师第 12 课作业及学习总结

关注

发布于: 2021 年 01 月 10 日

学习总结

学习了大数据原理、分布式文件系统 HDFS、大数据计算框架、大数据集群资源管理系统、大数据仓库。

map 输入：

  key 	value    偏移量 	<111,1>  偏移量 	<111,2>  偏移量 	<222,1>

复制代码

  key 	value     偏移量 	<111,25>  偏移量 	<222,32>

复制代码

map 输出：

  key 	value   111 	<1,1>   111 	<1,2>   222 	<1,1>   111 	<2,25>  222 	<2,32>

复制代码

reduce 输入：

  key 	values              111 	<1,1> <1,2> <2,25>  222 	<1,1> <2,32>

复制代码

reduce 输出：

  1   	25    2   	25    1   	32

复制代码

发布于: 2021 年 01 月 10 日阅读数: 12

关注

还未添加个人签名 2019.06.14 加入

还未添加个人简介

发布

暂无评论