StarRocks on AWS 回顾 | Data Everywhere 系列活动深圳站圆满结束

2022/7/30

Data Everywhere 深圳

想到实时数仓，很多人的第一印象就是架构复杂、操作困难、维护成本高。

可是，一旦企业业务上规模，传统数仓架构又无法满足业务的数据分析需求，实时数仓就特别必要。通过实时数仓，企业可以实现实时 OLAP 分析、实时数据看板、实时业务监控等功能。

得益于 Flink 对 SQL 的支持、StarRocks 的丰富建模方式和极致性能，一个简单易用的实时数仓落地方案完全有可能实现。

7 月 30 日，StarRocks 解决方案架构师王天宜受邀出席 AWS User Group Data Everywhere 主题活动，分享了 StarRocks 如何对实时数仓进行极速统一分析。

来自亚马逊云科技、哈尔滨工业大学、泽拓科技等的大数据技术专家和学者，也同场畅谈数据库架构、数据平台等相关话题。 此次活动在线下举行，现场 40 多位开发者、讲师和志愿者们共同探讨了大数据引擎相关技术的壁垒与发展。

​

讲师分享内容

01 何革新

如何构建以分布式数据库为基础的大数据平台

​

何革新

泽拓科技（深圳）有限公司

解决方案架构师

讲师介绍：

有 20 年以上数据库解决方案顾问经验，加入泽拓科技之前曾服务于 Oracle 公司近十年。

分享内容回顾

何革新老师从大数据的基本概念开始，阐述了大数据对数据库管理系统引发的需求，回顾了关系数据库架构的变迁， 分析了关系数据库为满足数据管理的挑战做出的架构变革，从而引出分布式数据库。

​

进而对分布式数据库的基本原理及逻辑架构做了全面的介绍， 分析了当前流行的几款分布式数据库， 并且对 kunlunbase 分布式的各个组件及功能， 特性优势及给数据平台可能带来的价值做了分析。

最后通过案例，从客户面对的问题（表面问题和深层次的问题），提出了的分布式数据库的解决方案及分布式数据库解决方案给客户带来的利益做了全面的剖析。

02 王天宜

StarRocks 如何对实时数仓进行极速统一分析

​

王天宜

StarRocks 解决方案架构师

讲师介绍：

曾就职于 Fidelity Investment，Softbank Investment，拥有丰富的数据库高可用方案设计经验，对 Oracle, PostgreSQL, MySQL, ClickHouse, Druid 等数据库的高可用架构与数据库生态有深入研究。

分享内容回顾

在数据驱动业务发展的当下，实时数仓的作用愈发举足轻重。通过实时数仓，企业可以实现实时 OLAP 分析、实时数据看板、实时业务监控等功能。

​

经过多年的发展探索，实时数仓已发展到 3.0 阶段 —— Flink 架构。不断的实践和落地过程中，Flink 实时数仓也面临着诸多挑战，在此背景下，得益于 Flink 对 SQL 的支持、StarRocks 的丰富建模方式和极致性能，一个简单易用的实时数仓落地方案完全有可能实现，StarRocks 使分析层存储引擎得到了统⼀。通过 StarRocks 统一分析层数据存储，避免多种存储引擎产生的数据孤岛，减少了运维与开发的复杂性。同时，StarRocks 的更新能力，高并发能力也为新的业务场景做了支撑。在 StarRocks 前的数据传输链路，我们可以通过 Flink CDC 进行改进。

03 王冰 

微服务的数据库架构探讨

​

王冰

亚马逊云科技金融行业

解决方案架构师

讲师介绍：

负责基于亚马逊云科技的云计算方案架构的咨询和设计服务金融类客户，致力于亚马逊云科技云服务在国内的应用和推广。多年金融行业研发交付、项目实施经验，曾就职于国内外银行和保险公司。

分享内容回顾

通过虚拟一个的电商用户从开始展业只有少量用户到千万级用户的场景，探讨了企业在数据库架构设计上的变化，从简单的单可用区数据库实例，通过增加只读节点，缓存节点，NoSQL 数据库，应用实例动态伸缩等方式探讨了数据库架构的演进。

最后王冰老师介绍了亚马逊云科技在托管数据库服务上可以如何帮助开发者解决问题以及如何进行数据库服务的选择，减轻企业在数据不断增长中架构的复杂度和运维的压力。

04 黄勃  

用数据发现问题 获取没有的洞见

黄勃

哈尔滨工业大学计算机应用技术专业博士出站博士后

讲师介绍：

主要研究兴趣包括人工智能、图像处理、模式识别等，从事相关研究近 20 年，现任企业技术中心主任，从事智能自助设备研发多年。发表相关论文近 40 篇，申请发明专利 100 余项，已授权近 60 项，主持国家级项目多项。

分享内容回顾

现在很多热门岗位在招聘要求上都会写数据分析能力。而且无论你是专业的数据分析师还是在市场营销，人事，财务，销售，运营至客服运维领域工作，好像都要求具备数据分析和解决问题的能力。

黄勃老师利用较短的时间，简单的介绍了数据分析的一个闭环流程。首先学会用对比分析在工作中发现问题；然后利用漏斗分析法拆解工作中的流程环节，将复杂问题简单化，以找到问题的切入点；第三，简单的提到了相关分析的概念；最后利用数据可视化方法和各种图形更好的展示自己的能力。

关于 StarRocks 

StarRocks 创立两年多来，一直专注打造世界顶级的新一代极速全场景 MPP 数据库，帮助企业建立“极速统一”的数据分析新范式，助力企业全面数字化经营。

当前已经帮助腾讯、携程、顺丰、Airbnb 、滴滴、京东、众安保险等超过 110 家大型用户构建了全新的数据分析能力，生产环境中稳定运行的 StarRocks 服务器数目达数千台。 

2021 年 9 月，StarRocks 源代码开放，在 Github 上的星数已超过 3100 个。StarRocks 的全球社区飞速成长，至今已有超百位贡献者，社群用户突破 5000 人，吸引几十家国内外行业头部企业参与共建。

​