写点什么

数据存储

0 人感兴趣 · 33 次引用

  • 最新
  • 推荐
https://static001.geekbang.org/infoq/b6/b690b053786239869704a0cde070877d.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

带你走进大数据 | 写给小白的大数据指南

本文将介绍数大数据与数据分析之间的关系,并追溯大数据的发展历史,本文重点内容将介绍大数据有关内容。在当今数字化时代,数据扮演着无比重要的角色。由于硬件设备和软件的发展,产生了海量的数据,挑战着我们处理和理解信息的能力。

https://static001.geekbang.org/infoq/34/347d245f393b65045ea9eeb202f6609b.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

糟了,生产环境数据竟然不一致,人麻了!

用户头像
冰河
04-14

今天突然发现数据库数据不一致了,瞬间整个人都头皮发麻

https://static001.geekbang.org/infoq/4d/4dfcedab50e9015177cc49d1207002ac.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

DataLeap 数据资产实战:如何实现存储优化?

本文主要讲述了使用MySQL作为JanusGraph存储后端时,在设计上面的思考,以及在实际过程中遇到的一些问题。

https://static001.geekbang.org/infoq/cd/cd1b00b83eb370bb539c75a5bb3dc4a6.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

云小课|GaussDB(DWS) 数据存储尽在掌控,冷热数据切换自如

GaussDB(DWS)支持根据业务系统的不同使用需求,对膨胀的数据进行冷热分级管理,将数据按照时间分为热数据、冷数据,这不仅可以提高数据分析性能还能降低业务成本。

https://static001.geekbang.org/infoq/56/56ea9afcd94e559845b5530c60e10645.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

程序员必备的数据库知识:数据存储结构

司马辽太杰是 NineData 工程师,本期介绍了五种常见数据存储结构,另外还有图、表格、链式、R-TREE等数据结构并未涉及,当然本文也只是对数据库存储结构的知识抛砖引玉,有兴趣的同学可以对每一种数据存储结构做更详细和深入的学习。

https://static001.geekbang.org/infoq/6a/6a915193272ed64ca9f9b22b1e30ea79.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

学习下 Redis 内存模型

redis,对于一个java开发工程师来讲,其实算不得什么复杂新奇的技术,但可能也很少人去深入了解学习它的底层的一些东西。下面将通过对内存统计、内存划分、存储细节、对象类型&内部编码这四个模块来学习学习redis的内存模型,手字笔录,潜心修行。

玩转云端 | 数据管理深似海,运维如何变“路人”?

数字技术正在改变人们生产、生活的方方面面。作为数字经济时代的重要生产要素,数据正以指数级别爆发式增长,企业对于数据存储及处理的方式和要求已是“今时不同往日”。最早古人存储数据的方法是“以物记物”或“借物记物”,即用更易于携带的事物代替所要记

https://static001.geekbang.org/infoq/08/0877fade99df0b406f6dc4e21c6ebdda.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

数据驱动测试 - 从方法探研到最佳实践

在自动化测试实践中,测试数据是制造测试场景的必要条件,本文主要讲述了在沟通自动化框架如何分层,数据如何存储,以及基于单元测试pytest下如何执行。并通过实践案例分享,提供数据驱动测试的具体落地方案。

https://static001.geekbang.org/infoq/1b/1b0f8db64bf738f86a7ff4fd951f1512.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

镕铭微电子加入龙蜥社区,推动开源 OS 在音视频产业的应用

近日,镕铭微电子签署了 CLA(Contributor License Agreement,贡献者许可协议),宣布正式加入龙蜥社区(OpenAnolis)。

物联网数据分析(上篇)——业务系统架构类

用户头像
阿里云AIoT
2022-11-01

物联网大数据统计数据显示,随着采用率的提高,设备在接下来的几年中在全球范围内产生成倍增长的数据。 越来越多的物联网厂商选择设备上云,想挖掘物联网设备数据背后的价值,本文从阿里云物联网数据分析功能的演进,探讨物联网数据分析的技术解决方案。

https://static001.geekbang.org/infoq/aa/aadcc88272771219702ae160e4ab128c.jpeg?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

Redis 数据结构 (一)-Redis 的数据存储及 String 类型的实现

Redis作为基于内存的非关系型的K-V数据库。因读写响应快速、原子操作、提供了多种数据类型String、List、Hash、Set、Sorted Set、在项目中有着广泛的使用,今天我们来探讨下下Redis的数据结构是如何实现的。

分布式架构下如何选择最佳 Store?

用户头像
KaiwuDB
2022-09-19

在多节点多 Store 的情况下,如何选择存储数据的 Store 尤为重要。但是Store 的 Rebalance从集群初始化就持续地进行,势必将带来一些现实问题。为此 KaiwuDB 研发了 Store 的禁用启用功能,本篇博客将为大家介绍具体的设计思路。

手把手教你如何使用 Timestream 实现物联网时序数据存储和分析

Amazon Timestream 是一种快速、可扩展的无服务器时间序列数据库服务,适用于物联网和运营应用程序,使用该服务每天可以轻松存储和分析数万亿个事件,速度提高了 1000 倍,而成本仅为关系数据库的十分之一。

https://static001.geekbang.org/infoq/99/9989bbb202ffbca13f1331e21fa353bf.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

提速 10 倍!深度解读字节跳动新型云原生 Spark History Server

更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群

https://static001.geekbang.org/infoq/fc/fc0efb5b553947bfa1e63e33d2ec7e62.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

效率提升 100%,YRCloudFile 让自动驾驶安全更有保障

用户头像
焱融科技
2022-06-24

目前,解决自动驾驶车辆感知问题最主要的方式是“数据训练”,通过大量训练数据让自动驾驶车辆对实际路况、车辆位置有更好地感知。那么,存储如何帮助训练车辆更好地提升感知能力,达到准确决策的需求呢?焱融科技给你想要的答案。

https://static001.geekbang.org/infoq/f6/f6596e85a0897b95231838d1e8162b85.jpeg?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

跨平台应用开发进阶 (十) :uni-app 实现数据存储、获取和删除

项目开发过程中,需要实现数据的全局存储、获取及删除操作。为此,阅读了uni-app官方文档,发现其已经内置方法实现以上功能。

https://static001.geekbang.org/infoq/91/91f0564d3da632de936ba48793bdcaf0.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

一文带你了解 「图数据库」Nebula 的存储设计和思考

用户头像
NebulaGraph
2022-05-07

图空间如何做物理隔离?Nebula 底层如何存储数据?数据校验怎么做?除了存储架构讲解同数据格式变更之外,本文还解答 10 多个关于 Nebula 存储的问题。

FastDFS 海量小文件存储解决之道

FastDFS是一个C语言实现的开源轻量级分布式文件系统

https://static001.geekbang.org/infoq/09/0943ceca6ceac4a99101591718d5f057.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

金融云原生漫谈(五)|如何打造更适合云原生的数据存储方案?

用户头像
York
2022-01-11

本期云原生漫谈,将和您一起探寻如何打造更适合云原生的数据存储方案。

https://static001.geekbang.org/infoq/26/2604e7ffb703272c63440a940d3493d8.webp?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

数据中台——数据汇聚存储技术解析

用户头像
用友BIP
2021-08-11

数据中台针对不同的业务数据类型、业务系统技术架构,设计不同的数据采集策略、数据同步规范、数据质量控制规范、数据存储方案等,实现业务中台数据、应用系统数据的集成汇聚。

https://static001.geekbang.org/infoq/61/61e5aac111471bf9119315acc7d4aebc.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

一文搞懂 MySQL 体系架构!!

用户头像
冰河
2021-04-13

不仅仅是面试,如果你想从一名底层程序员上升为高级工程师,架构师等,MySQL的底层原理和技术是你必须要掌握的。

https://static001.geekbang.org/infoq/fc/fc248a578c72e8ec2183de56150983d6.jpeg?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

Hadoop 之 HDFS 内部机制知多少?

用户头像
hanke
2021-01-26

探寻Hadoop里另外一个重要组件HDFS的架构和高可用相关机制

https://static001.geekbang.org/infoq/e7/e753edfc7f865ebd9ae1e0bc2a097fab.jpeg?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

区块链数据存储与 IPFS 技术的融合应用

用户头像
CECBC
2021-01-05

互联网时代,数据已经成为了企业的核心资产,大数据时代的数据被称为未来的“石油”。而区块链的分布式存储为生态大数据存储提供了全新的存储方式。

https://static001.geekbang.org/infoq/3f/3f1d6506c5e5d0833711c6471c311963.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

Canal 组件简介与 vivo 帐号实践

互联网应用随着业务的发展,部分单表数据体量越来越大,应对服务性能与稳定的考虑,有做分库分表、数据迁移的需要,本文介绍了vivo帐号应对以上需求的实践。

https://static001.geekbang.org/infoq/1a/1afbf8b4920039eea8474589d8a1f7b3.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

分布式集群如何实现高效的数据分布

本文介绍了一种高效的解决方案——DHT,通过一个简单的DHT实例,由浅入深解析其中的优缺点,并一步步进行改进,加强对DHT的理解。

https://static001.geekbang.org/infoq/1a/1afbf8b4920039eea8474589d8a1f7b3.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

vivo 云服务海量数据存储架构演进与实践

本文介绍了云服务业务海量数据存储架构的演进之路,详细讲解了云服务业务在面对海量数据存储时采用的分库分表的实践策略,同时介绍了云服务如何另辟蹊径,在数据库数据压缩上的实践方案。

https://static001.geekbang.org/infoq/6c/6cef4f341011e81034f01c9d4e330c2a.jpeg?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

LAXCUS 大数据集群操作系统:一个分布式分时共享 E 级系统软件(四)

用户头像
陈泽云
2020-10-20

当前的很多大数据处理工作,一次计算产生几十个GB、或者几十个TB的数据已是正常现象,驱动数百、数千、甚至上万个计算机节点并行运行也不足为奇。但是在数据处理的后面,对于这种在网络间传输、数量巨大、且发生频率日益增加的数据处理,需要大数据系统具备极

数据存储_数据存储技术文章_InfoQ写作社区