写点什么

架构师 0 期 Week12 作业

用户头像
Nan Jiang
关注
发布于: 2020 年 09 月 02 日
  • 在你所在的公司(行业、领域),正在用大数据处理哪些业务?可以用大数据实现哪些价值?

我目前所在行业是水环境建筑行业,可以用大数据处理来管理施工作业:识别物料,如钢筋数量,分析劳工动作,识别违规作业;分析历史项目的工期、物料花销和劳务成本,实现工程项目造价的准确预测。



  • 分析如下 HiveQL,生成的 MapReduce 执行程序,map 函数输入是什么?输出是什么,reduce 函数输入是什么?输出是什么?

map的输入表1的key是pageid,value是userid,表2的key是userid,value是age,map输出表1的key是userid,value是<表编号, pageid>,表2的key是userid,value是<表编号,age>。reduce的输入是map的输出,reduce输出的key是pageid,value是age。

用户头像

Nan Jiang

关注

还未添加个人签名 2019.04.26 加入

还未添加个人简介

评论 (1 条评论)

发布
用户头像
作业请添加“极客大学架构师训练营”标签,便于分类
2020 年 09 月 03 日 10:18
回复
没有更多了
架构师0期Week12作业