【Y 新闻】YMatrix 5.1 发布: MARS3 存储引擎支持更新删除列和数据
作者:安琪|YMatrix 文档工程师 & 王任远|YMatrix MXUI 研发工程师
01 发布亮点
MARS3:
1. 支持修改数据与表结构
在 AP 和 TP 场景中,我们会时常需要修改数据与表结构。MARS3 继承了 MARS2 在时序场景中的出色性能,在支持了表结构和数据的增删后,除了应用于 YMatrix 优势的时序场景,更可作为通用的高性能数据存储引擎,用于传统的 AP/TP 场景。
Before
MARS2 中无法修改表结构和数据
Now
允许增加/删除列,允许 UPDATE/DELETE 数据
2. 可配置的数据缓存
MARS3 使用了数据缓存优化写入性能。写入过程中,数据会被首先保存至内存,积累到一定数量时写入磁盘;根据场景不同配置不同的缓存大小,能够进一步提高写入速度。
a. 高频次小批量写入场景,设置合适的缓存可以避免磁盘频繁写入,提升性能。
b. 一次性大批量写入场景,可跳过缓存直接落盘,降低磁盘随机 I/O,写入速度更高。
3. 语法更简洁
相对于 MARS2 需要额外创建排序索引,使用 ORDER BY 子句指定排序键即可完成建表。
Before
Now
MatrixGate:
1. 任务中 DDL 即时执行
Before
当 mxgate 在写入数据时,修改表结构需要先暂停/停止任务,否则 DDL 会被 mxgate 的事务阻塞无法执行。
Now
新的 DDL 退避机制可以保证写入过程中 DDL 语句也能及时执行。
2. 自适应连接数(beta)
Before
当任务负载动态变化时,需要手动调整事务连接数(stream-prepared)以适应负载。
Now
新增 auto-tune 功能,允许 mxgate 根据写入负载自动进行调节。
3. 量化负载
Before
无法量化观测当前系统写入负载。
Now
以百分比展示每个任务的写入负载。
02 详细列表
1. 新增 MARS3 存储引擎 1,其与 MARS2 相比:
实现行列混存,写入数据行存落盘,大幅提升写入性能
无需额外创建索引即可完成建表
支持数据的更新与删除,支持增删列,支持 MVCC 机制
不仅继承了 MARS2 时序场景下的性能优势,还增添了对 AP 和 TP 场景的支持
2. 新增镜像实例迁移工具 mxmoveseg2:
支持迁移任意一个当前为 Mirror 的数据库实例到其他服务器
3. 数据迁移工具 mxshift 功能增强 3:
支持增量迁移:以表为单位,实现从 Greenplum 4.3.33/5/6/ YMatrix 集群并行迁移目标数据库中部分数据表的数据定义语言(DDL)及数据到新的 YMatrix 集群
4. MatrixGate 功能增强 4:
支持在写入过程中立即执行插入的 DDL 修改指令
支持根据不同写入事务的负载自动调节连接数
支持以百分比数值量化源端数据的写入负载
5. 图形化界面升级 5:
新增自助巡检页面,支持通过勾选巡检选项自助制定巡检计划,并生成详细的巡检报告
6. 国产平台 OpenEuler、Fusion 23(x86_64、AArch64、飞腾版、鲲鹏版)支持(企业版特性)6
更加全面的发布信息请见:
https://ymatrix.cn/doc/5.1/version_list
附录
2. https://ymatrix.cn/doc/5.1/tools/mxmoveseg
3. https://ymatrix.cn/doc/5.1/tools/mxshift
4. https://ymatrix.cn/doc/5.1/tools/mxgate/feature
5. https://ymatrix.cn/doc/5.1/maintain/self_service_inspection
6. https://ymatrix.cn/doc/5.1/install/mx5_cluster/mx5_cluster
本文为 YMatrix 原创内容,未经允许不得转载。欲了解更多超融合时序数据库相关信息,请访问 “YMatrix 超融合数据库” 官方网站
版权声明: 本文为 InfoQ 作者【YMatrix 超融合数据库】的原创文章。
原文链接:【http://xie.infoq.cn/article/e67b56304193d589f28fc23e5】。文章转载请联系作者。
评论