从用户真实需求出发，星环数据云平台 TDC 2.5 版本发布

2021 年是数字化转型关键的一年，据工信部消息显示，截止 2020 年，全国制造业数字化普及率为 69.8%，趋势一片向好。与此同时，埃森哲（Accenture）的一份研究报告显示，80%的中国企业正在进行数字化转型，但真正释放数字化潜力的只有 4%。这也就说明大部分企业的数字化转型依然只是处于尝试阶段，即使大型企业也不例外。星环科技通过大量的研究与观察发现，大型企业普遍缺乏能够满足多租户、弹性、灵活的数字化基础设施。传统的烟囱式系统架构导致企业内不同部门各自为政，重复建设自己的数据存储、IT 设备以及数据库，而不同的业务架构之间数据也无法互联互通，造成资源重复投入、数据孤岛等问题，阻碍企业的发展。企业也在努力寻找适合的数字化转型方案。在今天的主角星环数据云平台 Transwarp Data Cloud 2.5 亮相之前，先给大家分享两组星环科技市场部近期做的用户调研数据。这份调研数据清楚地展示了用户的真实需求，在左边这张图中我们看到用户对于大数据集群服务功能关注度排名前五的包括：平台稳定性、功能完备性、平台性能、平台安全和易操作性。这些功能关乎客户的研发投入、使用成本甚至业务的运转。此外，随着企业内大数据源源不断地产生，客户的扩容需求也在与日俱增，从右边这张图中我们可以看到，被调研的所有用户都会有年度扩容需求。

面对以上种种挑战以及客户的真实需求，星环数据云平台 Transwarp Data Cloud（ 以下简称 TDC ）应运而生。TDC 底层基于容器面向大数据应用的云原生操作系统 Transwarp Cloud Operating System（以下简称 TCOS），在一个 PaaS 平台上提供包括数据分析、应用开发和智能建模等在内的完整的面向数据生命周期的工具链，加速企业数字化转型。

基于星环 TDC 为江苏农信建设的大数据 DAAS 应用平台，提升江苏农信数据输出服务能力，通过 “数据+服务+应用”，产生闭环，促进生态，提升了数据资产服务、AI 模型工厂、业务应用共享等数据能力；基于 TDC 为某运营商建设的容器化大数据能力开放平台，实现了整体 IT 技术架构的容器化升级，整体资源利用率提升 60%，大数据服务交付时间由一周缩减至 2 小时。目前，星环数据云 TDC 已经在金融、能源、政府等多个行业落地。今天，星环数据云平台 TDC 再一次突破升级，迎来了 2.X 的长期支持版本 TDC 2.5，2.5 版本在原有基础上做了全方位提升，可以概括为：更稳定、更全面、更安全、更简单、更强大。接下来我们将从用户的五大需求出发，解读星环数据云平台 TDC 2.5 版本在平台稳定性、功能完备性、平台性能、平台安全和易操作性上面的重要更新：在平台稳定性上，TDC 2.5 版本的云原生底座星环云原生操作系统- TCOS 架构全新升级：1）自研组件与 Kubernetes 解耦，兼容性更好，且版本可以独立持续演进；2）新增和优化了均衡调度、存储调度、GPU 调度、应用感知调度等多种调度策略，提升大数据产品高效稳定运行；3）提供更加全面的监控能力，包括 GPU、存储、网络等设备的监控，保障平台高效稳定运行，可以支持大规模集群，同时作为 TDC 2.x 系列的 LTS 版本，2.5 版本支持 TDC 2.x 版本平滑升级到 TDC 2.5 版本。在功能完整性方面，作为国内外较早起步的数据云 TDC ，经过多年打磨，功能可谓应有尽有。TDC 底层采用了统一的容器支撑平台， 数据 PaaS、分析 PaaS、应用 PaaS 共享底层资源， 并通过弹性伸缩，来确保不同工作负载的资源需求；同时， TDC 支持 X86、ARM 等多种主流 CPU 架构以及 Linux / Windows / 国产操作系统，满足企业软硬件国产化的需求；TDC 还支持 GPU 独占与共享调度，满足多种场景，并可提高 GPU 资源利用率。而升级之后的数据云平台功能更加全面和丰富，TDC 2.5 基于企业大数据场景实施的最佳实践经验，内置了面向大数据、数据库、数据开发和人工智能四种领域场景的 16 个产品组合，开箱即用，一键部署，快速向用户提供成熟专业的数据能力和价值。

同时，新增基于可视化界面开发应用的低代码开发平台，使得非技术开发人员无需编写代码，直接通过拖拽组件和模型驱动的模式创建网页或应用程序，有助于降低企业应用开发复杂性，进一步提升开发效率。在平台性能方面，TDC 2.5 做了很多平台性能的优化，例如以存储卷并发创建性能为例，较 2.4 版本吞吐量提升了 49.74%，平均延时降低了 31.7%，这样在大数据扩容场景中，无论对于计算引擎或者存储引擎这些有持久化存储卷需求的工作负载，扩容速度有了较大的提升，从而可以更快响应业务的需求。在平台的安全性方面，TDC 2.5 除了持续加固和升级以避免漏洞带来的安全性问题外，还增加了网络角色和节点角色规划功能，网络角色可以划分为管理网、业务网、监控网、外网，用于承载不同类型的网络流量，不同的网络之间可以通过安全策略进行管控；节点角色可以划分为网关节点、出口节点、控制节点和工作节点，在不同的节点上部署不同类型的组件，在物理上做隔离。网络和节点角色划分功能可以实现对东西向和南北向流量进行有效的访问安全控制，确保平台的稳定、安全、可靠。在易操作上，为了解决大数据软件配置文件多，配置操作繁琐复杂，TDC 在配置模版引擎的基础上，提供了可视化的配置中心：支持以图形化和统一方式管理组件的配置文件，高效管理组件的复杂配置；支持配置文件修改历史查询，有效回溯每一次修改；在多人并行修改场景中，提供配置冲突对比和解决机制，防止配置丢失和冲突。在 2.5 版本全方位升级的功能加持之下，TDC 可以更加出色地满足客户的多种业务场景，尤其对于需要给不同团队或不同分公司赋能的集团型企业而言， TDC 提供的 “多租户共享数据湖及数据开发” 能力，可以帮助其减少重复开发成本，大幅提升研发效率。比如，一个 TDC 集群使用「多租户」方式建设统一的数据湖以及进行数据开发，可以服务集团中的不同团队。其中集群管理员能够为每个团队创建租户并通过「配额管理」分配相应的资源，并按需配置「计量计费」方式。对于体量较小且业务有关联的多个业务团队，可以通过 TDC 的「组件共享」实现大数据计算引擎或者存储引擎共享，减少数据的流转，降低资源使用的费用。而对于隔离性和安全性需求更高的业务团队，可以通过 TDC 「节点独占」租户来保证该租户有完全独占的底层节点资源。

在建设统一数据湖的过程中，集团会按照数据应入尽入的策略，将所有的数据纳入统一的中心数据湖中。同时按照业务需求，将中心数据湖的数据流转到对应租户的存储引擎中。整个数据流转过程通过 TDC 的 「数据商城」和「平台安全管控」保障了数据的安全性与流通性。

由于同一个租户上的业务系统在不同的时间对于资源的需求不同，TDC 平台提供了「弹性扩缩容」的功能，可以通过配置合理的策略来保障不同业务系统在不同时间的资源需求，保障了业务连续性，并提升了资源利用率。另外，TDC 平台提供了完整的数据业务「开发入口」与各种 API，客户可以通过统一的数据业务开发平台进行高效开发与管理。目前，星环科技新一代智能数据云平台 Transwarp Data Cloud（TDC）已经在众多行业有成熟的全方位解决方案落地，满足了各种数据处理场景的需求，实现了企业数据与应用的生态化建设。未来星环将在数据云领域持续深耕，助力企业不断释提升大数据能力，引领企业数字化转型升级浪潮。TDC白皮书领取