架构师 0 期 Week12 作业
在你所在的公司(行业、领域),正在用大数据处理哪些业务?可以用大数据实现哪些价值?
我目前所在行业是水环境建筑行业,可以用大数据处理来管理施工作业:识别物料,如钢筋数量,分析劳工动作,识别违规作业;分析历史项目的工期、物料花销和劳务成本,实现工程项目造价的准确预测。
分析如下 HiveQL,生成的 MapReduce 执行程序,map 函数输入是什么?输出是什么,reduce 函数输入是什么?输出是什么?
map的输入表1的key是pageid,value是userid,表2的key是userid,value是age,map输出表1的key是userid,value是<表编号, pageid>,表2的key是userid,value是<表编号,age>。reduce的输入是map的输出,reduce输出的key是pageid,value是age。
评论 (1 条评论)