写点什么

架构师训练营第 12 周——总结

用户头像
李伟
关注
发布于: 2020 年 09 月 02 日
架构师训练营第 12 周——总结

大数据技术发展史

  • 分布式文件系统GFS

  • 大数据分布式计算框架MapReduce

  • NoSQL数据库系统BigTable



常用技术

  • 大数据分析与大数据参考:Hive、Spark SQL

  • 大数据挖掘与机器学习:Mahout、MLlib、TensorFlow

  • 大数据批处理计算:MapReduce、Spark

  • 大数据流处理计算:Storm、Flink、Spark Streaming

  • NoSQL系统:HBase、Cassandra

  • 大数据存储:HDFS



常用RAID技术

  • RAID0:提升写入速度

  • RAID1:增加备份功能

  • RAID10:提升写入速度+增加备份功能

  • RAID5:螺旋备份

  • RAID6:双螺旋备份



用户头像

李伟

关注

还未添加个人签名 2018.05.07 加入

还未添加个人简介

评论

发布
暂无评论
架构师训练营第 12 周——总结