从 1 天到 10 分钟的超越，华为云 DRS 在背后做了这些

摘要：华为云 DRS 助力一汽-大众 BI 平台实时查看报表，提升数字化决策能力。

本文分享自华为云社区《分钟级查看报表，华为云&一汽-大众，让商机时刻被洞见》，作者：GaussDB 数据库。

数字化时代下，企业 IT 的数据重心从支持在线交易后移到运营分析，数据的及时更新、高效分析、减少人工干预，是企业经营的追求目标，因此企业不再满足于“T+1”，而是“T+0”，需要实时和个性化，对于汽车行业也不例外。

一汽-大众汽车有限公司（简称一汽-大众）于 1991 年成立，是我国第一个按经济规模起步建设的现代化乘用车工业基地，旗下有奥迪、大众、捷达三大品牌 20 余款产品，覆盖 A、B、C 级全系列乘用车型。

数字革命的浪潮下，4S 门店的服务也更加精准高效，为了更好的服务客户，4S 集团通过分析客户使用习惯及偏好、产品个性化需求收集等方式，多维度满足用户购车和体验需求。但随着数据挖掘的深入，对 BI 平台的要求也越高，为解决报表业务系统数据量的快速增长、数据汇集、交互分析难等难题，一汽-大众携手华为云数据库在 MEP（经销商多功能生态平台）-BI 平台项目合作中取得了突破，跨越了挑战。

实时数据更新，才能具备更快的市场反应能力

众所周知，BI 平台的报表系统可以连接多维数据库，报表目的是帮助用户掌握和了解数据，企业决策者通过实时的数据进行分析和挖掘，为业务的变化及时作出应对策略。一汽-大众 4S 门店的 BI 报表业务需要实时汇集所有门店的数据，面临巨大的技术挑战。一汽-大众所有的 4S 门店拥有总计 60+MySQL 实例，200+数据库，每个数据库约有 150+张表要同步，共有 3 万张表需要数据实时同步到 BI 系统内。如果按照传统的数据入湖方式，需要配置 3 万条数据同步链路，更需要海量的工作比对数据一致性，维护成本极高，同步效率低下。此外，随着数据量的膨胀，现有的数据库无法支撑数 TB 级别的数据量。因此打造支持海量数据存储、数据实时同步的商业数据智能分析的 BI 平台迫在眉睫。

面对一汽-大众的业务挑战，华为在方案选型上的主要考量如下：

• 抽取数据对源数据库影响最小化：抽取数据绝对不能拖垮源数据库，也不能对源业务的性能造成较大的衰减，甚至表被锁定；

• 部署实施要轻量简单：不需要在每个数据源安装代理程序，即开即用，配置操作简单易用；

• 数据一致性有保障：基于 binlog 解析进行逻辑数据同步，具有断点续传和严格的认点技术，不惧网络抖动，有效确保数据一致性。

综上，具备实时精准同步且保障数据一致的轻量级服务，华为云数据复制服务 DRS 是迎接业务挑战的不二之选。

华为云 DRS 助力一汽-大众报表系统数据实时同步，全面释放数据价值

DRS(Data replication Service)华为云数据复制服务，将云上的数据通过多对一的方案汇集到具备超强写入能力的华为旗舰型云原生数据库 GaussDB(for MySQL)中，保证数据一致性和实效性，再通过 DRS 实施同步，从 GaussDB(for MySQL)同步到华为云数据仓库 GaussDB(DWS)中进行分析。但要想达到实时数据同步难度极大，因此，华为云数据库解决了如下核心难题：

• 增加数据来源列，解决主键冲突：通过 MySQL 到 GaussDB(for MySQL)的多对一方案，增加数据来源列，记录 server/database/table 信息，避免多个源表主键冲突。

• 同步链路支持动态加减表：新增业务随时需要增加同步的表，华为云 DRS 支持 GaussDB(for MySQL)的链路动态增减表，配置更加简单方便。

• 标记数据入湖时间，帮助实时分析：华为云数据库提供的方案中，增加附加列数据行写入时间和更新时间的列，标记数据插入和更新时间。为数据入湖及数据实时分析打下基础。

• 引入缓冲数据库，实时计算：针对 1.8 万张表不停的汇集和写入，选择了百万级 QPS 吞吐量和海量数据存储能力的 GaussDB(for MySQL)作为缓冲层数据库，解决 OLTP 和 OLAP 数据库之间天然的数据处理能力差异。基于 DRS 实时准确的数据同步后，华为云 GaussDB(DWS)实现实时计算，极大缩短复杂报表的执行时间。

• 数据实时精准同步：基于华为云 DRS 准确的数据同步能力，正常情况下延迟均在 1s 以内，为实时报表提供基础条件，帮助一汽-大众实现了销售报表数据可用时间从 1 天降低为 10 分钟。且数据同步准确度高，源端和目标端数据行数一致。

业务上线后，一汽-大众业务报表系统维护的链路数量从 3 万条降低至 65 条，工作效率大幅提升；同时 DRS 保证数据一致性，10 亿级数据无一条丢失，极大降低数据比对工作；帮助一汽-大众实现了销售报表数据可用时间从 1 天降低为 10 分钟，时效性大幅提升。此外，对于缓冲层数据库 GaussDB(for MySQL) 具备海量数据存储能力，最大支持 128TB，超百万级 QPS 吞吐，可支撑业务快速发展；基于 GaussDB(for MySQL)的计算存储分离架构，数据三副本存储强一致，数据零丢失；RTO 秒级，故障秒切换，全面保障数据安全。

一汽-大众以用户为中心，构建以数据分析为核心的生态圈，洞察用户需求，提供高价值产品，深受客户青睐。而华为云数据库通过技术手段实现数据实时同步，从海量的数据中发现洞察，为企业经营决策提供数据基础。未来，华为云数据库将持续携手一汽-大众通过数字技术，打造差异化有竞争力的数字化服务，满足客户对产品和服务日益增长的个性化需求。更多华为云数据库详情了解，欢迎前往华为云官网：https://www.huaweicloud.com/product/dbs.html

点击关注，第一时间了解华为云新鲜技术~