大数据架构之上

从下面图来看主要分为：数据采集、数据存储、数据计算和查询、数据可视化及分析这四个步骤组成大数据架构图。从图中可以看出大数据架构主要解决的问题包括：1、如何接入数据2、如何管理监控集群3、如何存储和管理数据（数据治理）4、如何计算（离线批处理、实时流计算）5、如何查询数据和展示 6、如何保证数据安全等（数据隔离、访问权限等这个图中没体现）每个问题都是一个技术的挑战。

不过在之上应该还有一个应用层，大数据平台目的还是要解决实际的业务问题的，可以在任何行业中都能看见大数据的应用如在互联网中体现在产品服务（推荐、千人千面）、市场营销（广告、标签）、用户管理（用户画像）等，在金融方面的风控、欺诈行为分析等，在医疗如这次新冠疫情的预测分析，还有在教育、社会安全、智慧城市方面都有相应的应用。



参考：一篇文章读懂大数据中台