架构师训练营第十二周作业

用户头像
关注
发布于: 2020 年 09 月 02 日

作业一(任选其一):

  • 在你所在的公司(行业、领域),正在用大数据处理哪些业务?可以用大数据实现哪些价值?



  • 分析如下 HiveQL,生成的 MapReduce 执行程序,map 函数输入是什么?输出是什么,reduce 函数输入是什么?输出是什么?



INSERT OVERWRITE TABLE pv_users
SELECT pv.pageid, u.age
FROM page_view pv
JOIN user u
ON (pv.userid = u.userid);

Page_view 表和 user 表结构与数据示例如下:



1.在你所在的公司(行业、领域),正在用大数据处理哪些业务

本人所在的电信行业正在使用大数据。

1.用户行为分析。

2.系统日志分析。

3.告警数据分析。

4.传输数据分析。



2.可以用大数据实现哪些价值

1.分析用户的行为,查看用户对那些应用的流量比较感兴趣。

2.分析系统日志,对系统预警有很重要的作用。

3.告警分析设备告警日志,对这些日志进行关联分析,优化网络质量。

4.分析传输数据,对传输的问题进行排查。



发布于: 2020 年 09 月 02 日 阅读数: 23
用户头像

关注

还未添加个人签名 2018.04.25 加入

还未添加个人简介

评论

发布
暂无评论
架构师训练营第十二周作业