写点什么

分布式文件系统

0 人感兴趣 · 7 次引用

  • 最新
  • 推荐
https://static001.geekbang.org/infoq/3a/3a9e3fb11216713c4a5ab8319a9b56fb.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

SeaweedFS 高可用方案最佳实践

用户头像
冰心的小屋
2022-12-08

本方案主要解决单节点故障对集群造成的影响,保证文件的完整性、集群功能的正确性。

https://static001.geekbang.org/infoq/f8/f8b71a030b943157a1f3eed8670edc52.jpeg?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

焱融看|非结构化数据场景下,数据湖到底有多香?

用户头像
焱融科技
2022-06-01

由于过去缺乏有效的数据处理机制,导致有大量数据分散于各处,难以管理。此时,数据湖应运而生,那么什么是数据湖呢?今天,焱融看带大家来一探究竟,看看它到底是什么,究竟有多香。

都 2022 年了,HDFS 为何还如此能战

HDFS也许不是最好的大数据存储技术,但依然是最重要的大数据存储技术。

ClickHouse 存算分离架构探索

用户头像
Juicedata
2021-12-27

ClickHouse 作为开源 OLAP 引擎,因其出色的性能表现在大数据生态中得到了广泛的应用。区别于 Hadoop 生态组件通常依赖 HDFS 作为底层的数据存储,ClickHouse 使用本地盘来自己管理数据,官方推荐使用 SSD 作为存储介质来提升性能。但受限于本地盘的容量上限

常见开源分布式文件系统架构对比

用户头像
Juicedata
2021-12-24

文件系统是计算机中一个非常重要的组件,为存储设备提供一致的访问和管理方式。在不同的操作系统中,文件系统会有一些差别,但也有一些共性几十年都没怎么变化。

https://static001.geekbang.org/infoq/97/97e5db2f2a2a9bb5c7686ef73cc4e9d5.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

分布式文件系统 FastDFS 实战

用户头像
Fox
2021-10-20

FastDFS 是一个开源的高性能分布式文件系统(DFS)。 它的主要功能包括:文件存储,文件同步和文件访问,以及高容量和负载平衡。主要解决了海量数据存储问题,特别适合以中小文件(建议范围:4KB < file_size <500MB)为载体的在线服务。

云小课 | MRS 基础入门之 HDFS 组件介绍

​​摘要:HDFS是MapReduce服务中的基础文件系统,全称为Hadoop的分布式文件系统(Hadoop Distributed File System),可支持实现大规模数据可靠的分布式读写。

分布式文件系统_分布式文件系统技术文章_InfoQ写作社区