写点什么

数据倾斜

0 人感兴趣 · 8 次引用

  • 最新
  • 推荐
https://static001.geekbang.org/infoq/b4/b404f0f3ad81f89f486e073431fbb61c.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

Dubbo 负载均衡策略之 一致性哈希 | 京东云技术团队

本文主要讲解了一致性哈希算法的原理以及其存在的数据倾斜的问题,然后引出解决数据倾斜问题的方法,最后分析一致性哈希算法在Dubbo中的使用。通过这篇文章,可以了解到一致性哈希算法的原理以及这种算法存在的问题和解决方案。

https://static001.geekbang.org/infoq/84/84e52f9a38e4de57af15e827635b31da.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

浅谈离线数据倾斜

用最通俗易懂的话来说,数据倾斜无非就是大量的相同key被partition分配到一个分区里,造成了'一个人累死,其他人闲死'的情况,这种情况是我们不能接受的,这也违背了并行计算的初衷,首先一个节点要承受着巨大的压力,而其他节点计算完毕后要一直等待这个忙碌的节点

https://static001.geekbang.org/infoq/d8/d8618b5e804721e35b98b8b9116f1ee4.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

一种自平衡解决数据倾斜的分表方法

这篇主要描述了B端令牌系统应用数据分表解决业务数据量增大,且存在的数据倾斜问题,主要面向的场景是一对多数据倾斜问题

https://static001.geekbang.org/infoq/f1/f1a82c1ba889130aabe6ad476b434077.jpeg?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

Redis 数据倾斜与 JD 开源 hotkey 源码分析揭秘

之前旁边的小伙伴问我热点数据相关问题,在给他粗略地讲解一波redis数据倾斜的案例之后,自己也顺道回顾了一些关于热点数据处理的方法论,同时也想起去年所学习JD开源项目hotkey——专门用来解决热点数据问题的框架。在这里结合两者所关联到的知识点,通过几

怎么排查是哪里出现了数据倾斜

用户头像
编程江湖
2021-12-09

Hive 数据倾斜怎么发现,怎么定位,怎么解决

https://static001.geekbang.org/infoq/6f/6fa13c501de472b158bd5b0119774fc2.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

Spark 必读!总有一些 Spark 知识点你需要知道

一文梳理 Spark 必知必会知识点既可以快速对 Spark 有个简单清晰的认知;也可以回顾 Spark 基础概念和原理;还可以进行知识点查缺补漏。

数仓发生数据倾斜不要慌,教你轻松获取表倾斜率

​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​摘要: GaussDB(DWS)是MPP并行架构,若表的数据存在倾斜情况,会引起一系列性能问题,影响用户体验,严重时可能会引起系统故障。因此能快速获取倾斜的表并整改是GaussDB(DWS)运维管理人员

数据倾斜_数据倾斜技术文章_InfoQ写作社区