写点什么

数据仓库

2 人感兴趣 · 70 次引用

  • 最新
  • 推荐

数仓分层架构如何设计?

用户头像
当当6 月 22 日

刚接触数据仓库之前,小白我就有一个疑问,数据仓库为什么分层?

云图说|数据仓库服务 GaussDB(DWS) 的“千里眼、顺风耳”—数据库智能运维

​​摘要:数据库智能运维(DMS)是GaussDB(DWS) 为客户数据库快速、稳定运行提供保驾护航的能力,对业务数据库所使用磁盘、网络、OS指标数据,集群运行关键性能指标进行收集、监控、分析。通过综合收集到的多种类型数据对数据库主机、实例、业务SQL进行诊断

眼观六路耳听八方还不知疲倦?数仓智能运维服务体系是怎么做到的?

​​摘要:本文主要介绍GaussDB(DWS)数据库智能监控运维服务体系的设计规划和现状。

https://static001.geekbang.org/infoq/40/404a3057bfc6bd6a0ea14c8e63635cd9.webp?x-oss-process=image/resize,w_416,h_234

数据湖 vs 数据仓库 vs 数据集市

用户头像
数据社5 月 24 日

数据湖、数据仓库、数据集市,这三个概念都是干什么的,有什么区别呢?这边文章可以为你解释下他们的异同。

数据仓库如何确定主题域?

用户头像
数据社5 月 22 日

前几天跟一个朋友聊了一些数据中台建设的内容,针对数据仓库中主题域如何划分这个话题聊了很多。其实数据仓库建设的理论大家已经都知道了不少,也看过不少书,那么在实际建设数据仓库中,我们还是会遇到各种问题。今天我们就一起聊聊主题域如何划分?

https://static001.geekbang.org/infoq/39/39636c9c60f7b2bdca39a013b20da4c1.webp?x-oss-process=image/resize,w_416,h_234

数据仓库如何确定主题域?

用户头像
数据社5 月 21 日

前几天跟一个朋友聊了一些数据中台建设的内容,针对数据仓库中主题域如何划分这个话题聊了很多。其实数据仓库建设的理论大家已经都知道了不少,也看过不少书,那么在实际建设数据仓库中,我们还是会遇到各种问题。今天我们就一起聊聊主题域如何划分?

数仓 ETL 系统:给强大的“心脏”配上“超级流水线”

​​​​摘要:在数据仓库平台建设过程中,数据的加载、卸载,各层数据模型之间的数据流转,业务规则的实现等等数据加工过程都会以ETL任务的方式实现。

数据仓库分层架构及元数据管理

数据仓库的数据来源于不同的源数据,并提供多样的数据应用,数据自下而上流入数据仓库后向上层开放应用,而数据仓库只是中间集成化数据管理的一个平台。

https://static001.geekbang.org/infoq/88/88db08b91111be1e48d4db6ef5c20b77.jpeg?x-oss-process=image/resize,w_416,h_234

数据仓库为什么要分层

分层的主要原因是在管理数据的时候,能对数据有一个更加清晰的掌控,详细来讲,主要有下面几个原因:

https://static001.geekbang.org/infoq/c1/c164826a0065ed90364ddd0a4a0ff586.png?x-oss-process=image/resize,w_416,h_234

还有人搞不懂数据仓库与数据库的区别?

数据库与数据仓库的区别实际讲的是 OLTP 与 OLAP 的区别。

这才是大数据的正确打开方式

​​​​​​摘要:如何将各种大数据技术栈整合在一起,发挥出大数据技术的最大价值成为业界都在关注的问题。

数据脱敏:数仓安全隐私保护见真招儿

​​摘要:如何加强技术层面的数据安全和隐私保护,对数据仓库产品本身提出更多的功能要求,也是数据安全建设最行之有效的办法。

https://static001.geekbang.org/infoq/fb/fb6a8f849180d8e1ff2ea7b10f33fed3.jpeg?x-oss-process=image/resize,w_416,h_234

通俗易懂数仓建模—Inmon 范式建模与 Kimball 维度建模

在数据仓库领域,有两位大师,一位是“数据仓库”之父 Bill Inmon,一位是数据仓库权威专家 Ralph Kimball,两位大师每人都有一本经典著作,Inmon大师著作《数据仓库》及Kimball大师的《数仓工具箱》,两本书也代表了两种不同的数仓建设模式!

https://static001.geekbang.org/infoq/eb/eb7e654c7c4fa53a62f16a3873730186.png?x-oss-process=image/resize,w_416,h_234

实时数据仓库的发展、架构和趋势

用户头像
网易数帆4 月 2 日

随着实时计算引擎的不断发展以及业务对于实时报表的产出需求不断膨胀,业界最近几年就一直聚焦并探索于两个相关的热点问题:实时数仓建设和大数据架构的批流一体建设。

https://static001.geekbang.org/infoq/16/167f5dec137337b3efdbe301aec6b025.jpeg?x-oss-process=image/resize,w_416,h_234

国内唯一,阿里云挺进 Forrester 全球云数据仓库卓越表现者象限

阿里云凭借产品现有能力、产品战略、市场表现三项优势,进入Forrester Wave 2021 Q1云数据仓库卓越表现者象限,成为入选此次评测的唯一中国厂商,并由竞争者象限跃升至卓越表现者象限。

畅想数据湖

用户头像
数据社3 月 24 日

大家好,我是一哥,周末有读者私聊我咨询了一些问题,遂想起了之前看过的一些关于数据湖的知识,下面是基于之前的所见和自己的思考而成文。

https://static001.geekbang.org/infoq/3f/3f4d5dcd0c6ddca5e7c91f69b94903cf.jpeg?x-oss-process=image/resize,w_416,h_234

二十张图让你一分钟全面学习数仓建设之路

用户头像
初学大数据3 月 10 日

二十张图让你一分钟全面学习数仓建设之路

https://static001.geekbang.org/infoq/cd/cde68a4ae8066020cd531f8ae2047b3b.jpeg?x-oss-process=image/resize,w_416,h_234

超干货 (实战经验)结合公司业务分析离线数仓建设实践

技术是为业务服务的,业务是为公司创造价值的,离开业务的技术是无意义的

https://static001.geekbang.org/infoq/4f/4f6ad5c714358c030342f05b009126c8.jpeg?x-oss-process=image/resize,w_416,h_234

最值得阅读的数据仓库书籍推荐

从事数仓工作几年了,在工作学习过程也看了很多数据仓库方面的,此处整理了对自己帮助较大的部分,给大家推荐一下,希望能帮助到大家。

https://static001.geekbang.org/infoq/6f/6fa8c975f9808ecfa44259f85282baa5.jpeg?x-oss-process=image/resize,w_416,h_234

Hive 操作异常总结

用户头像
小马哥1 月 25 日

收集Hive安装过程中的异常及解决

https://static001.geekbang.org/infoq/9e/9e2e061108beb5cdb2bdb3f025e9d191.jpeg?x-oss-process=image/resize,w_416,h_234

大数据知识专栏 - 数据仓库

用户头像
小马哥1 月 24 日

大数据专栏系列文章: 通过该文章, 了解数据仓库, 入门其基本特征, 以及数据仓库与数据库的各自作用等, 为Hive的学习做准备.

https://static001.geekbang.org/infoq/fe/fe1a211943e85c329e7ab34fbc12a960.png?x-oss-process=image/resize,w_416,h_234

数仓建设中最常用模型 --Kimball 维度建模详解

数仓建模首推书籍《数据仓库工具箱:维度建模权威指南》,本篇文章参考此书而作。

https://static001.geekbang.org/infoq/b0/b0aae12ff141e3c915eb3b6e7eaa86e1.jpeg?x-oss-process=image/resize,w_416,h_234

腾讯云加速构建云原生数据仓库,助力企业数字化转型

云原生数据仓库成为风口,腾讯云大数据助力企业数字化升级

数据仓库_数据仓库资料文章-InfoQ写作平台