分布式存储_分布式存储资料文章-InfoQ写作平台

分布式存储

0 人感兴趣 · 32 次引用

关注

最新
推荐

https://static001.geekbang.org/infoq/d2/d2a9f137453427689a75e19fad85bf56.png?x-oss-process=image/resize,w_416,h_234

新年上班第一天生产环境分布式文件系统崩了！！

冰河3 月 21 日

年前祭拜服务器没效果？

高可用分布式存储 fastdfs 可扩展无限扩容

https://static001.geekbang.org/infoq/89/89d369be0c83cd7855ed3bcbb8bf3ce6.jpeg?x-oss-process=image/resize,w_416,h_234

有状态容器应用，从入门到实践

焱融科技3 月 15 日

什么是无状态或有状态容器呢？所谓无状态容器应用，意味着容器上应用所使用的历史数据或运行状态不需要进行持久化，重新拉起这个应用时，无需关注这些历史输入。简单来说，例如你要运行一个计算器（而且这个计算器不需要支持历史记录功能），当你重新拉起这个

Kubernetes 云原生焱融科技分布式存储容器存储

https://static001.geekbang.org/infoq/21/21374fadecded074e611f1d586319ebf.jpeg?x-oss-process=image/resize,w_416,h_234

NewSQL 分布式数据库，例如 TIDB 用 K/V 的底层逻辑

读字节3 月 10 日

那么通过这种思路，就能比关系型数据库的b/b+树索引在写的性能方面带来质的提升，而且对于局部热点，也就是近期数据带来惊人的查询性能，虽然全局范围的查询有所降低，数据段合并会带来的资源消耗(rocksdb通过多线程合并提升了这一过程的效率)

大数据分布式分布式存储 RocksDB TiDB

https://static001.geekbang.org/infoq/50/50a7e917dd2b7b89da9124cf8689ed8d.jpeg?x-oss-process=image/resize,w_416,h_234

关于 MPI-IO，你该知道的

焱融科技3 月 8 日

在高性能计算中，经常会用到MPI或者MPI-IO，那MPI和MPI-IO到底是什么呢？

存储 HPC 焱融科技文件存储分布式存储

https://static001.geekbang.org/infoq/c3/c382ed7914528efbfe9f06a617921246.png?x-oss-process=image/resize,w_416,h_234

建立博客数据库并连接 ES 用 MySQL 还是 MongoDB 更合理

读字节3 月 1 日

若进行博客等文本类数据的读写以及搜索引擎连接的解决方案对比，这就包括了搜索引擎数据同步，文章属性、文章内容、文章内图片以及图片属性的存储和查询，可以肯定的下结论：MongoDB的解决方案中要远远好于MySQL的解决方案。

MySQL mongodb 分布式分布式数据库分布式存储

https://static001.geekbang.org/infoq/18/181fceb9a3ca4290362f4907c391f0ff.png?x-oss-process=image/resize,w_416,h_234

分布式存储单主、多主和无中心架构的特征与趋势

读字节2 月 25 日

多主架构的实现不仅完全解决了单主的瓶颈问题之外，还防止了无中心架构的所有缺点，当然这种架构从分布式存储的未来说肯定是最好的一种选择了！关键是到底有没有这种架构呢？目前只能说又是Google了！Colossus File System了解一下，GFS的下一代的继任者！

分布式分布式存储大数据架构分布式文件系统大数据 Google

DCache 分布式存储系统｜K-K-Row 缓存模块的创建与使用

TARS基金会2 月 25 日

随着微服务与云的发展，传统的 SQL 结构化存储方案已经跟不上脚步，于是 NoSQL 出现了。DCache 作为基于 TARS 的分布式 NoSQL 缓存系统，完美支持 TARS 服务。前一篇文章中，我们介绍了怎么创建并使用 KV 模块，本文将继续介绍如何使用 K-K-Row 缓存模块

MySQL 数据库 nosql 分布式存储 TARS

https://static001.geekbang.org/infoq/8b/8b2e8b22b735dbb99e046f7fd9739099.jpeg?x-oss-process=image/resize,w_416,h_234

听了微信创始人张小龙的演讲，更加坚定 Filecoin 的光辉未来

IPFS社区爱好者1 月 21 日

1月19日，微信公开课Pro微信之夜活动上，微信创始人张小龙做了一段长达两小时的演讲，详细阐述了视频号、直播，以及微信在做的一些新尝试。在这场演讲中，张小龙在谈到为什么要做视频号时，列举了一组数据:

分布式存储 IPFS Filecoin

https://static001.geekbang.org/infoq/88/88e7570fd707fa2501f52f0c9dab82af.jpeg?x-oss-process=image/resize,w_416,h_234

一名分布式存储工程师的技能树是怎样的？

焱融科技1 月 11 日

很多刚刚进入存储行业或者想要转行到分布式存储行业的工程师，经常有困惑，就是“一名分布式存储工程师的技能树是怎样的？”

分布式存储分布式存储分布式文件

https://static001.geekbang.org/infoq/f6/f606a299b290b2bdf3cd1324e297f0e9.png?x-oss-process=image/resize,w_416,h_234

元旦在家撸了两天 Seata 源码，你们是咋度过的呢？

冰河1 月 5 日

有组队撸Seata源码的吗？

分布式事务分布式数据库分布式存储数据一致性 seata

https://static001.geekbang.org/infoq/09/0970d86f824da10dcc1a2c6c9e448726.png?x-oss-process=image/resize,w_416,h_234

互联网大厂有哪些分库分表的思路和技巧？

冰河2020 年 12 月 30 日

互联网大厂是如何分库分表的？

分布式数据库分库分表分布式存储数据一致性数据同步

https://static001.geekbang.org/infoq/0b/0b54d1148702035f461ddf94a26098a6.jpeg?x-oss-process=image/resize,w_416,h_234

冰河，能不能讲讲如何实现 MySQL 数据存储的无限扩容？

冰河2020 年 12 月 19 日

如何实现MySQL数据存储的无限扩容，看这一篇就够了！！

MySQL 分布式存储海量数据 mycat 可扩展

https://static001.geekbang.org/infoq/35/3505b7af4ab6f5b071131a338e1e22e3.jpeg?x-oss-process=image/resize,w_416,h_234

海量数据架构下如何保证 Mycat 的高可用？

冰河2020 年 12 月 11 日

如何实现Mycat高可用集群，我只看这一篇！！

分布式事务分布式数据库分布式存储 mycat 数据库集群

https://static001.geekbang.org/infoq/8a/8accead51bcec81d6472eb29548cd615.jpeg?x-oss-process=image/resize,w_416,h_234

【Mycat】作为 Mycat 核心开发者，怎能不来一波 Mycat 系列文章？

冰河2020 年 11 月 11 日

我们一起走一波Mycat？

分布式事务分布式数据库系统架构分布式存储 mycat

从零到千万用户，我是如何一步步优化 MySQL 数据库的？

冰河2020 年 11 月 10 日

用户从零到千万级别的数据库架构演进历程！

数据库架构性能优化分布式数据库分布式存储

十八般武艺玩转 GaussDB(DWS) 性能调优（三）：好味道表定义

华为云开发者社区2020 年 11 月 2 日

摘要：表结构设计是数据库建模的一个关键环节，表定义好坏直接决定了集群的有效容量以及业务查询性能，本文从产品架构、功能实现以及业务特征的角度阐述在GaussDB(DWS)的中表定义时需要关注的一些关键因素。

数据分布式存储

https://static001.geekbang.org/infoq/16/1610e618f6865cd7ab0b39aeb666aebb.jpeg?x-oss-process=image/resize,w_416,h_234

【FastDFS】面试官：如何实现文件的大规模分布式存储？（全程实战）

冰河2020 年 9 月 27 日

搭建FastDFS高可用集群环境，我只看这一篇！！

高并发高性能分布式存储 fastdfs 海量存储

【FastDFS】小伙伴们说在 CentOS 8 服务器上搭建 FastDFS 环境总报错？

冰河2020 年 9 月 25 日

这下在CentOS8服务器上搭建FastDFS环境不会报错了吧！

分布式存储 fastdfs

https://static001.geekbang.org/infoq/db/db9819d104d8d05fc8e85a9bc5229ba5.png?x-oss-process=image/resize,w_416,h_234

滴滴 Ceph 分布式存储系统优化之锁优化

滴滴技术2020 年 9 月 3 日

滴滴技术出品

云计算分布式存储 Ceph 滴滴技术

https://static001.geekbang.org/infoq/54/54ec817b577b11b1d1605040fdd2bd87.png?x-oss-process=image/resize,w_416,h_234

Ceph 集群部署

雪雷2020 年 8 月 21 日

近期进行公司业务容器化改造，在为kubernetes提供存储选型方面，在选型中本地存储不可跨node，NFS共享存储不好做高可用，因此选型Ceph来为k8s提供存储类。特此笔记以备后用。

分布式存储 Ceph rdb pvc

https://static001.geekbang.org/infoq/35/35865d3867a557780e58300edc1ec35f.jpeg?x-oss-process=image/resize,w_416,h_234

SWARM 学习 1——Kademlia 分布式路由表协议

AIbot2020 年 8 月 19 日

@2020-08-19, AIbot

区块链 DHT 分布式存储分布式文件存储分布式路由

https://static001.geekbang.org/infoq/25/25f3bb0bf17e58576af6ccc5ec1c5502.png?x-oss-process=image/resize,w_416,h_234

认识分布式系统

多颗糖2020 年 8 月 18 日

重新认识分布式系统。

分布式分布式系统分布式存储

https://static001.geekbang.org/infoq/3c/3c4a4213b1148f8e32e34073b151f9a5.jpeg?x-oss-process=image/resize,w_416,h_234

DSN 主流项目调研 2——Sia 和 SAFE Network

AIbot2020 年 8 月 13 日

Sia是一个早期项目，于 2013 年在 HackMIT 启动，2015 年正式启动。它旨在将需要文件存储的用户与全球提供的、未充分利用的硬盘容量的主机连接起来。使用区块链技术保护其数据，为用户和主机提供更划算的存储方案。

区块链分布式存储分布式文件存储 Sia SAFENetwork

https://static001.geekbang.org/infoq/ea/eaf601b1c959b1d717edd719e848dd7a.png?x-oss-process=image/resize,w_416,h_234

DSN 主流项目调研 3——Orbit 数据库的故事

AIbot2020 年 8 月 13 日

通过OrbitDB，我们有能力写出去中心化的，分布式的数据层存储系统；1.用户拥有自己的数据、2.第三方应用要求权限在本地运行而不是存储我们的数据到他们的服务器上、3.对等节点之间项目连接不需要中间层、4.应用满足GDPR(Genral Data Protection Regulation)和

区块链分布式存储 IPFS 分布式文件 Orbit

https://static001.geekbang.org/infoq/9f/9ff2a5bc175e69da08af0100ec3d4e96.jpeg?x-oss-process=image/resize,w_416,h_234

DSN 主流项目调研 1——Storj 和 Arweave 的简介

AIbot2020 年 8 月 12 日

另一个基于以太坊网络的分散存储项目，它拥有相当多的社区用户，致力于开源和用户体验精神。Storj 是一个平台、加密货币和一套分散式应用程序，允许您以安全和分散的方式存储数据。

分布式存储区块链+分布式文件存储 Storj Arweave

https://static001.geekbang.org/infoq/bd/bd70ab46a63cf4bbfe23eec98ded0368.jpeg?x-oss-process=image/resize,w_416,h_234

DSN 主流项目调研 0——IPFS&&Filecoin 白皮书总结

AIbot2020 年 8 月 12 日

IPFS项目是ProtoLab实验室推出的第二大开源项目，依托实验室之前推出的MultiFormat、Libp2p和IPLD三个项目组织而成。

区块链分布式存储分布式文件存储 IPFS Filecoin

https://static001.geekbang.org/infoq/29/2901b2ee9218d7d8f1a0d9188024b182.jpeg?x-oss-process=image/resize,w_416,h_234

存储性能加速引擎之预读

焱融科技2020 年 7 月 20 日

顺序预读（prefetch，在Linux中也称为预读，read ahead）是一种用于提升顺序读性能的技术，用于缩小存储设备和应用程序之间巨大的效率差距。Linux内核在通用预读框架中执行顺序文件预读，它主动拦截VFS层中的文件读取请求，并将顺序的请求转换为异步预读请求

Linux sds 焱融科技分布式存储预读

海量分布式 KV 存储系统 Doris 临时失效过程分析

林昱榕2020 年 7 月 13 日

Doris（https://github.com/itisaid/Doris）是一个海量分布式 KV 存储系统，其设计目标是支持中等规模高可用可伸缩的 KV 存储集群。

高可用极客大学架构师训练营分布式存储 Doris 可伸缩

https://static001.geekbang.org/infoq/0c/0c498f8f0dbd1caf555443173391a075.jpeg?x-oss-process=image/resize,w_416,h_234

Ceph 数据恢复初探

焱融科技2020 年 7 月 7 日

大家好，我是焱融科技的研发猿小焱，本文由我和大家一起探讨下Ceph数据恢复相关的知识。

焱融科技文件存储分布式存储数据恢复 Ceph

https://static001.geekbang.org/infoq/a0/a0cf8f4694765d6b164d79221d65dfbe.png?x-oss-process=image/resize,w_416,h_234

最强总结——分布式事务处理方式

小闫2020 年 7 月 6 日

分布式事务处理方式的最强总结！

分布式分布式锁 Java 面试分布式存储分布式缓存

创作场景

分布式存储

推荐作者

推荐标签