写点什么

分布式存储

0 人感兴趣 · 32 次引用

  • 最新
  • 推荐
https://static001.geekbang.org/infoq/89/89d369be0c83cd7855ed3bcbb8bf3ce6.jpeg?x-oss-process=image/resize,w_416,h_234

有状态容器应用,从入门到实践

用户头像
焱融科技3 月 15 日

什么是无状态或有状态容器呢?所谓无状态容器应用,意味着容器上应用所使用的历史数据或运行状态不需要进行持久化,重新拉起这个应用时,无需关注这些历史输入。简单来说,例如你要运行一个计算器(而且这个计算器不需要支持历史记录功能),当你重新拉起这个

https://static001.geekbang.org/infoq/21/21374fadecded074e611f1d586319ebf.jpeg?x-oss-process=image/resize,w_416,h_234

NewSQL 分布式数据库,例如 TIDB 用 K/V 的底层逻辑

用户头像
读字节3 月 10 日

那么通过这种思路,就能比关系型数据库的b/b+树索引在写的性能方面带来质的提升,而且对于局部热点,也就是近期数据带来惊人的查询性能,虽然全局范围的查询有所降低,数据段合并会带来的资源消耗(rocksdb通过多线程合并提升了这一过程的效率)

https://static001.geekbang.org/infoq/50/50a7e917dd2b7b89da9124cf8689ed8d.jpeg?x-oss-process=image/resize,w_416,h_234

关于 MPI-IO,你该知道的

用户头像
焱融科技3 月 8 日

在高性能计算中,经常会用到MPI或者MPI-IO,那MPI和MPI-IO到底是什么呢?

https://static001.geekbang.org/infoq/c3/c382ed7914528efbfe9f06a617921246.png?x-oss-process=image/resize,w_416,h_234

建立博客数据库并连接 ES 用 MySQL 还是 MongoDB 更合理

用户头像
读字节3 月 1 日

若进行博客等文本类数据的读写以及搜索引擎连接的解决方案对比,这就包括了搜索引擎数据同步,文章属性、文章内容、文章内图片以及图片属性的存储和查询,可以肯定的下结论:MongoDB的解决方案中要远远好于MySQL的解决方案。

https://static001.geekbang.org/infoq/18/181fceb9a3ca4290362f4907c391f0ff.png?x-oss-process=image/resize,w_416,h_234

分布式存储单主、多主和无中心架构的特征与趋势

用户头像
读字节2 月 25 日

多主架构的实现不仅完全解决了单主的瓶颈问题之外,还防止了无中心架构的所有缺点,当然这种架构从分布式存储的未来说肯定是最好的一种选择了!关键是到底有没有这种架构呢?目前只能说又是Google了!Colossus File System了解一下,GFS的下一代的继任者!

DCache 分布式存储系统|K-K-Row 缓存模块的创建与使用

用户头像
TARS基金会2 月 25 日

随着微服务与云的发展,传统的 SQL 结构化存储方案已经跟不上脚步,于是 NoSQL 出现了。DCache 作为基于 TARS 的分布式 NoSQL 缓存系统,完美支持 TARS 服务。前一篇文章中,我们介绍了怎么创建并使用 KV 模块,本文将继续介绍如何使用 K-K-Row 缓存模块

https://static001.geekbang.org/infoq/8b/8b2e8b22b735dbb99e046f7fd9739099.jpeg?x-oss-process=image/resize,w_416,h_234

听了微信创始人张小龙的演讲,更加坚定 Filecoin 的光辉未来

1月19日,微信公开课Pro微信之夜活动上,微信创始人张小龙做了一段长达两小时的演讲,详细阐述了视频号、直播,以及微信在做的一些新尝试。在这场演讲中,张小龙在谈到为什么要做视频号时,列举了一组数据:

https://static001.geekbang.org/infoq/88/88e7570fd707fa2501f52f0c9dab82af.jpeg?x-oss-process=image/resize,w_416,h_234

一名分布式存储工程师的技能树是怎样的?

用户头像
焱融科技1 月 11 日

很多刚刚进入存储行业或者想要转行到分布式存储行业的工程师,经常有困惑,就是“一名分布式存储工程师的技能树是怎样的?”

https://static001.geekbang.org/infoq/0b/0b54d1148702035f461ddf94a26098a6.jpeg?x-oss-process=image/resize,w_416,h_234

冰河,能不能讲讲如何实现 MySQL 数据存储的无限扩容?

用户头像
冰河2020 年 12 月 19 日

如何实现MySQL数据存储的无限扩容,看这一篇就够了!!

十八般武艺玩转 GaussDB(DWS) 性能调优(三):好味道表定义

用户头像
华为云开发者社区2020 年 11 月 2 日

摘要:表结构设计是数据库建模的一个关键环节,表定义好坏直接决定了集群的有效容量以及业务查询性能,本文从产品架构、功能实现以及业务特征的角度阐述在GaussDB(DWS)的中表定义时需要关注的一些关键因素。

https://static001.geekbang.org/infoq/16/1610e618f6865cd7ab0b39aeb666aebb.jpeg?x-oss-process=image/resize,w_416,h_234

【FastDFS】小伙伴们说在 CentOS 8 服务器上搭建 FastDFS 环境总报错?

用户头像
冰河2020 年 9 月 25 日

这下在CentOS8服务器上搭建FastDFS环境不会报错了吧!

https://static001.geekbang.org/infoq/54/54ec817b577b11b1d1605040fdd2bd87.png?x-oss-process=image/resize,w_416,h_234

Ceph 集群部署

用户头像
雪雷2020 年 8 月 21 日

近期进行公司业务容器化改造,在为kubernetes提供存储选型方面,在选型中本地存储不可跨node,NFS共享存储不好做高可用,因此选型Ceph来为k8s提供存储类。特此笔记以备后用。

https://static001.geekbang.org/infoq/25/25f3bb0bf17e58576af6ccc5ec1c5502.png?x-oss-process=image/resize,w_416,h_234

认识分布式系统

用户头像
多颗糖2020 年 8 月 18 日

重新认识分布式系统。

https://static001.geekbang.org/infoq/3c/3c4a4213b1148f8e32e34073b151f9a5.jpeg?x-oss-process=image/resize,w_416,h_234

DSN 主流项目调研 2——Sia 和 SAFE Network

用户头像
AIbot2020 年 8 月 13 日

Sia是一个早期项目,于 2013 年在 HackMIT 启动,2015 年正式启动。它旨在将需要文件存储的用户与全球提供的、未充分利用的硬盘容量的主机连接起来。使用区块链技术保护其数据,为用户和主机提供更划算的存储方案。

https://static001.geekbang.org/infoq/ea/eaf601b1c959b1d717edd719e848dd7a.png?x-oss-process=image/resize,w_416,h_234

DSN 主流项目调研 3——Orbit 数据库的故事

用户头像
AIbot2020 年 8 月 13 日

通过OrbitDB,我们有能力写出去中心化的,分布式的数据层存储系统;1.用户拥有自己的数据、2.第三方应用要求权限在本地运行而不是存储我们的数据到他们的服务器上、3.对等节点之间项目连接不需要中间层、4.应用满足GDPR(Genral Data Protection Regulation)和

https://static001.geekbang.org/infoq/9f/9ff2a5bc175e69da08af0100ec3d4e96.jpeg?x-oss-process=image/resize,w_416,h_234

DSN 主流项目调研 1——Storj 和 Arweave 的简介

用户头像
AIbot2020 年 8 月 12 日

另一个基于以太坊网络的分散存储项目,它拥有相当多的社区用户,致力于开源和用户体验精神。Storj 是一个平台、加密货币和一套分散式应用程序,允许您以安全和分散的方式存储数据。

https://static001.geekbang.org/infoq/bd/bd70ab46a63cf4bbfe23eec98ded0368.jpeg?x-oss-process=image/resize,w_416,h_234

DSN 主流项目调研 0——IPFS&&Filecoin 白皮书总结

用户头像
AIbot2020 年 8 月 12 日

IPFS项目是ProtoLab实验室推出的第二大开源项目,依托实验室之前推出的MultiFormat、Libp2p和IPLD三个项目组织而成。

https://static001.geekbang.org/infoq/29/2901b2ee9218d7d8f1a0d9188024b182.jpeg?x-oss-process=image/resize,w_416,h_234

存储性能加速引擎之预读

用户头像
焱融科技2020 年 7 月 20 日

顺序预读(prefetch,在Linux中也称为预读,read ahead)是一种用于提升顺序读性能的技术,用于缩小存储设备和应用程序之间巨大的效率差距。Linux内核在通用预读框架中执行顺序文件预读,它主动拦截VFS层中的文件读取请求,并将顺序的请求转换为异步预读请求

海量分布式 KV 存储系统 Doris 临时失效过程分析

用户头像
林昱榕2020 年 7 月 13 日

Doris(https://github.com/itisaid/Doris)是一个海量分布式 KV 存储系统,其设计目标是支持中等规模高可用可伸缩的 KV 存储集群。

https://static001.geekbang.org/infoq/0c/0c498f8f0dbd1caf555443173391a075.jpeg?x-oss-process=image/resize,w_416,h_234

Ceph 数据恢复初探

用户头像
焱融科技2020 年 7 月 7 日

大家好,我是焱融科技的研发猿小焱,本文由我和大家一起探讨下Ceph数据恢复相关的知识。

分布式存储_分布式存储资料文章-InfoQ写作平台