糟糕,数据库异常不可用怎么办?
本文分享自华为云社区《糟糕,数据库异常不可用怎么办?》,作者:GaussDB 数据库。
随着数字化转型的加速,数据量爆发式增长,用户对数据库运维能力要求更高,实现对数据库的高效智能管理,尤其是业务异常时,数据库运维平台能自动定位故障并修复,或者提供有价值信息,帮助客户快速定位解决问题。
华为云数据库团队打造的 RDS for MySQL 智能 DBA 助手,为数据库管理人员提供了一站式数据库运维方案,能够帮助用户快速处理异常,保持业务稳定运行。近期,我们新上线了自治限流功能,通过限流非核心业务 SQL 来保障核心业务稳定运行,下面将为您带来该项业界领先的功能的详细解读。
在遭遇异常流量高峰时,如何处理?
在实际运维场景中,客户因为业务变更或者业务高峰期会带来流量高峰,导致系统指标异常,实例 CPU 飙升近 100%,会话 SQL 处理变慢,活跃连接数增加,数据库响应异常甚至不可用。可能的原因有以下两个方面:
SQL 问题:SQL 执行效率慢,如对无主键、无索引的表进行查询操作时,CPU 和 IO 被打满。
流量问题:突发的流量急剧上升,数据库容量达到瓶颈,影响正常业务。
解决方案:
针对上述问题,一般会采用两种方式来处理:
方式一:先分析异常 SQL,定位后手动 Kill 会话
方式二:简单粗暴,重启数据库。
但面对复杂问题,传统解决方案往往无法从根本上解决,定位解决问题花费时间长,导致业务受损。针对这一挑战,业界采用限流的方式来处理,不区分业务,即不会区分限流 SQL 所在的库或者客户端用户,这可能导致无差别的 kill 会话,核心业务受损。
我们今天介绍的自治限流功能是如何应对这一潜在风险呢?
自治限流,指的是通过预先设置限流策略,自动限定执行 SQL 的并发度,通过小部分业务受损,保障核心业务的正常运行。具体来说,可以通过以下三个策略来进行流控:
分库、分用户设置限流范围
自治限流功能支持分库、分用户两种方式设置,客户根据业务情况,识别核心业务库和客户端用户,按需选择相应的限流方式。
按库设置:根据业务重要程度,选择对特定的一个或者多个库进行限流,默认不区分库名。
按用户名设置:根据不同用户业务差异,选择对特定的一个或者多个用户进行限流,默认不区分用户。
设置限流时间
通过设置限流时间窗(即自治限流功能只在该时间段生效)和每次最大限流时长(即自治限流生效后持续时长),方便定位 SQL 异常,请注意:同一天只在该时间窗内生效一次。
设置限流策略
条件 1:根据业务情况,设置 CPU 利用率大于多少 【且/或】 活跃会话数大于多少,且上述条件持续时间大于多少分钟,会触发限流。
条件 2:设置允许的最大活跃并发数,当前活跃会话数大于最大活跃会话数时,会将会话数清理到小于最大活跃会话数。设置界面如下:
完成上述设置后,自治限流功能可以自动检测客户实例异常,触发限流策略后,根据配置的限流范围和时间,自动进行分库分用户限流处理,在保证核心业务 SQL 稳定运行的前提下,限制引发 CPU 飙升的新上业务 SQL,带来活跃会话数逐渐降低,CPU 下降到正常值,QPS 恢复到业务正常水平,数据库实例恢复正常。
流量高峰常常是不可预测的,这给运维带来非常大的挑战和工作负担。华为云数据库自治限流功能,通过分库与分用户限流方式,自动检测数据库异常,并及时进行限流处理,保障核心业务的稳定运行,极大减轻了 DBA 的运维压力,使其更聚焦数据架构设计以及数据价值挖掘等核心工作。目前该功能已上线,欢迎大家体验。https://www.huaweicloud.com/product/mysql.html
版权声明: 本文为 InfoQ 作者【华为云开发者联盟】的原创文章。
原文链接:【http://xie.infoq.cn/article/3a66336abe4cf5a3bff057a20】。文章转载请联系作者。
评论