《The Google File System》新说

多年以后，当 编程巨匠 Jeff Dean 在风景秀丽的海滩，扶着摇椅回顾自己一生的时候，一定会想到 2003 年的那个下午、那些决定的对错是非以及那些发着光的日子。这一年发生了很多事情：非典肆虐、伊拉克战争爆发、张国荣去世......忙碌的 Jeff Dean 却没有时间感受这个世界的苦难，他跟好友正决定把 Google 内部开发的一个文件系统公之于众，这个系统在内部广受好评，但他们没想到，这个偶然的决定却犹如一颗核弹，永远改变了世界。改变世界并不容易，但这篇论文和后来的 BigTable 以及 MapReduce 合称老三篇，它们揭开了云计算时代的序幕，即使二十年后的现在，我们虽然耳熟能详但仍在探索，或者说处于云计算的时代。云计算技术大致可以分为三类：存储、计算和调度。GFS 以及基于 GFS 的 BigTable 和 Spanner 可以归为存储类，MapReduce 则分化出计算和调度两个部分。今天我们聊聊 GFS 以及它的开源实现 HDFS。