12 周作业 - 大数据

本人从事物联网行业，当数据采集上来后，如何对数据进行分析和价值挖掘甚至机器学习，都绕不开“大数据”，所谓不可不察也！

之前读过大数据的科普书籍，再到订阅智慧老师大数据的专栏，再到大数据的课程，所谓对大数据从背景到概念，从应用到技术支撑，都有一个有点到线的逐步深入认识。

技术大潮一浪接一浪，大数据在承接前浪的基础上，面对数据到爆炸的问题，通过hdfs文件存储hadoop靠近数据的计算以及hive极大简化了应用门槛，对接已有的广大的java生态等技术栈，开创了一个行业，并成为其他行业的水和电，在满足实时处理的基础上Spark等技术更是风头占尽。

作为技术洪流中的架构师，开发人员以及从业人员，掌握大数据业已成为一项基本技能。