第 04 周作业提交
作业一:
一个典型的大型互联网应用系统使用了哪些技术方案和手段,主要解决什么问题?请列举描述。
Lambda 架构为例 :从数据的特征,分为实时数据处理和离线数据处理。实现数据标准化及衍生计算以满足业务需求
实时数据处理工具包括: kafka、spark structure/streaming 等
离线处理工具包括: hive 、etl工具 kettle等
作业二:
根据当周学习情况,完成一篇学习总结
本周主要介绍数据架构的演进、所有的变化及演进都是为满足业务需求,企业的发展阶段不同,简单且有效的设计才最具有价值,一定避免过度设计,更要避免手拿锤子看哪里丢失钉子。
评论