写点什么

10-6- 华为云 OBS 大数据存算分离方案,助力企业顺利实现数字化转型!

作者:科技之光
  • 2022-10-26
    江苏
  • 本文字数:1266 字

    阅读完需:约 4 分钟

华为云 OBS 大数据存算分离方案,助力企业顺利实现数字化转型!

随着大数据技术的飞速发展,人们对数据价值的认识逐渐加深,进而对大数据产生了前所未有的重视。当下,大数据更是凭借着独特的优势融入到了各行各业,相关企业还针对大数据价值的开发成立了大数据分析部门,将大数据的使用能力作为了企业发展的重要考量。那么,在数字化极速发展的当下,企业到底该如何进行数字化的转型升级呢?

众所周知,当下企业在进行数字化转型升级时,都不同程度的遇到了多集群数据共享难的挑战,一般情况下数据只能在集群内部使用,数据共享往往只能通过拷贝实现,而且公共数据集多份存储,容易出现数据冗余,给我们带来不便。同时,大多数数据的计算存储资源绑定,当计算和需求不一致时,只能够等比扩容,容易造成资源浪费,而且数据三副本存储,利用率低,成本高。

简而言之,当下很多企业在数字化转型升级过程中,花了很多钱,但是却没有花到点子上,以至于给企业带来的效益比并不明显,故而在进行数字化转型时,越来越多的企业选择以华为云为例的云服务商来帮助自己进行数字化底层基座的搭建与运维服务。比如针对上述企业数字化转型中遇到的痛点,华为云推出了基于对象存储服务 OBS 作为统一数据湖存储的大数据存算分离方案。


据了解,该方案基于对象存储服务 OBS 的大容量高带宽能力,以及多协议共享访问技术(HDFS/POSIX/OBS API),实现了 Hadoop 生态多计算引擎(Hive、Spark 等)兼容对接。相比传统企业在本地 IDC 机房部署大数据业务,华为云数据存算分离方案能够通过统一的权限控制,实现多集群间的数据共享,做到数据“0”拷贝,实现了数据的融合高效和协同分析。同时,它的计算和存储相互分离,支持独立扩容或者缩容,计算资源可弹性伸缩,资源利用率得到了提升。此外,对象存储服务 OBS 支持利用率最高的分布式数据容错技术 Erasure code,磁盘利用率大幅提升,数据存储空间需求远低于三副本,能够更好的帮助企业实现降本的目的。

另外,对象存储服务 OBS 提供了 OBSFileSystem 插件(OBSA-HDFS),可与上层大数据平台无缝对接,实现业务零改造。该插件的主要的作用是提供 HDFS 文件系统相关接口的实现,让大数据计算引擎可以将 OBS 作为 HDFS 协议的底层存储,让企业能够更好的利用大数据资源。

计费方面,对象存储服务 OBS 相对来说也更为经济划算。企业可以根据自己的使用需求按需扩缩,用多少付多少,不用担心业务少的时候造成资源浪费,能够更好的满足企业业务的灵活诉求,帮助企业节省运营成本,使企业有更多的资金去打通从技术到运营的全链路。


目前,华为云已经在为众多企业提供数字化的转型升级服务,并且在服务的过程中,凭借着技术强、资源多、创新快和更可靠的服务,帮助诸多企业实现了效益倍增。而华为云对于服务安全方面的操守,即不碰客户数据、不与客户抢生意、没有数据变现业务等,也让更多的企业能够放心的与华为云进行合作。同时,可以预测的是,通过帮助企业快速构建海量数据信息处理系统,并对海量信息数据实时与非实时进行分析挖掘,华为云能够助力更多企业发现全新价值点和商机,进而在经济不稳定的情况下,获得更好的发展。

 

用户头像

科技之光

关注

还未添加个人签名 2022-10-20 加入

还未添加个人简介

评论

发布
暂无评论
10-6-华为云OBS大数据存算分离方案,助力企业顺利实现数字化转型!_科技之光_InfoQ写作社区