DTCC 2023 即将启幕 明天见!
8 月 16 日-18 日,由 IT168 联合旗下 ITPUB、ChinaUnix 两大技术社区主办的第 14 届中国数据库技术大会(DTCC2023)将在北京举行。
作为国内云原生数据仓库代表厂商,酷克数据受邀亮相 DTCC 2023,与广大数据库领域从业人士共同分享云原生数仓发展趋势,探讨数据仓库提升实时性的路径。
精彩话题 不容错过!
8 月 16 日下午 14:50,酷克数据资深解决方案架构师陈义贤将在“数据库内核•技术创新”专场发表题为“分布式数仓的 TP 能力探索—HashData UnionStore”的演讲,介绍 HashData 以 Log is Database 的思路在分布式数据仓库改造中的具体技术方案及未来发展规划。
OLTP 和 OLAP 是数据库领域最为重要的应用场景划分。过去,人们认为这两大场景不能同时兼顾,而实时数仓和 HTAP 的出现像一座桥梁,打破了二者的分界线。
传统的数据仓库更多地服务于批处理和分析型业务,对实时业务的支持并不理想。近年来,随着企业对实时数据分析需求的提升,仅依靠传统数据仓库已越来越难以满足企业需求。如何构建既能支撑分析业务,又能支撑实时业务(OLTP)的 HTAP 数据仓库,成为一个重要课题。
时间旅行,让数据可回溯
日志作为数据库系统中的重要组成部分,记录了数据库所有的变更信息。HashData 通过 UnionStore 对底层数据存储的快照化设计,结合重做日志,赋予数据仓库“时间旅行”的能力,支持用户回溯到任意历史时间点,查看数据状态,为云原生数据仓库提供了强大的可回溯性,使得数据库更容错、更可靠,应用也更容易开发。
更强的并发能力与拓展性
Log is database 的理念可以大幅优化 OLTP 能力,通过将数据随机写入的操作剥离,计算集群只将 WAL 日志提交至 UnionStore 集群,由 UnionStore 集群处理日志数据,并重放生成新的页数据,这样减少了复杂的锁定和同步操作,可以大幅提升并发能力,同时也减少随机访问。
UnionStore 是一种新的工作负载,相比于传统的 HTAP 解决方案,UnionStore 最大的创新之处在于它是基于 OLAP 系统打造的 HTAP 数据库,TP 与 AP 负载共用一套系统和一套数据,数据按需使用行存与列存,通过对象存储进行灵活转换,实现了加载、同步、查询、计算的事务级实时性,显著降低了用户的 IT 资源投入和跨场景使用的成本。
本次演讲中,陈义贤老师将为参会者介绍酷克数据以 Log is Database 的思路在分布式数据仓库改造中的具体技术方案,以及这一方案如何帮助企业更好地支撑实时数仓和 HTAP 业务。
演讲内容干货满满,敬请关注!
观展交流 等您前来!
在 DTCC 现场,设有酷克数据展位(展位号:F5),展示 HashData 云数仓产品架构、解决方案及丰富的应用案例。真诚邀请您莅临展台参观咨询,并有机会获取精美礼品。
本次大会的演讲文字稿件和视频回放,我们将在会后的第一时间分享发布。欢迎大家扫描下方二维码,添加企微小助手联系我们,获取更多产品与活动的最新资讯!
版权声明: 本文为 InfoQ 作者【HashData】的原创文章。
原文链接:【http://xie.infoq.cn/article/6236f58c75a59c0c844a16de4】。文章转载请联系作者。
评论