腾讯云 WeData 全新升级:数据分类分级管理,构建数据安全屏障
版本介绍
产品介绍:
腾讯云 WeData(以下简称 WeData)是一站式数据开发治理平台,支持公有云和私有化部署。
WeData 融合了包含数据集成、数据开发、任务运维的全链路 DataOps 数据开发能力,以及数据地图、数据质量、数据安全等一系列数据治理和运营能力,帮助企业在数据构建和应用的过程中实现降本增效,数据价值最大化。
升级背景:
WeData 自发布以来,已在金融保险、电子商务和交通出行等多个行业领域得到广泛应用,满足了客户对离线数据仓库和近实时数据湖平台建设的多样化需求。
更重要的是,WeData 显著提升了客户在业务数据加工过程中的准确性,确保了数据处理的可靠性。
在提供平台价值的同时,WeData 团队深入分析了复杂的使用场景和客户需求,结合行业经验和一线客户的反馈,精心打造了全新版本。这一版本不仅总结了以往的经验教训,而且引入了创新功能,以更好地满足市场和用户的期待。
通过不断的迭代和优化,WeData 致力于为用户提供一个更加强大、灵活且用户友好的数据开发治理平台,助力企业在数据驱动的决策过程中实现更高的效率和精准度。
版本简介:
WeData 新版本现已隆重推出,以丰富的功能特性,为数据开发和治理能力带来极大的提升。
新增特性功能 90 项:我们深入挖掘用户需求,精心设计并实现了 90 项全新特性,旨在进一步扩展平台的功能性和灵活性;
新增部分特性功能 26 项:除了全面的特性扩展,我们还在已有功能中新增了 26 项特性能力,以满足更丰富的业务场景;
优化功能 8 项:我们不断追求卓越,对现有功能进行了细致的优化,确保用户在使用过程中能够享受到更加流畅和高效的体验。
这一版本不仅为新用户提供了强大的数据开发治理工具,同时也为现有客户带来了显著的平台价值提升。
WeData 致力于通过不断的技术创新,帮助企业构建更加智能、高效的数据开发治理平台,从而在数据驱动的商业环境中保持竞争优势。
以下为本次版本升级的功能介绍:
数据集成
1、 实时整库同步新增 13 条链路;
2、 实时单表同步新增 4 种来源端+4 种目标端;
2、 离线单表同步新增 8 种来源端+10 种目标端;
4、 支持批量创建单表同步任务;
5、 支持查看实时任务运行详情;
6、 支持设置告警规则。
数据开发
1、 支持通过关键词检索任务代码;
2、 支持批量操作高效管理开发任务;
3、 支持下载任务、实例信息;
4、 支持 SQL 代码推荐补全;
5、 支持 SQL 任务间参数灵活传递;
6、 支持自定义任务依赖偏移量并支持预览。
数据建模
1、 新增完善的数据建模能力。
数据治理
(包括数据安全、数据质量、数据服务)
1、 支持敏感数据识别与分级分类管理;
2、 支持数据静态/动态脱敏;
3、 支持批量上传创建质控任务;
4、 支持查看质控任务并配置告警;
5、 支持动态模式 SQL 创建数据服务;
基础服务
1、 支持跨环境跨项目迁移;
2、 新增 2 种告警方式,支持免打扰;
3、 新增 8 种数据源;
4、 支持自定义角色权限。
核心能力介绍
敏感数据识别与管理,构建数据安全屏障
功能说明:
WeData 数据安全服务旨在提供安全的数据共享,打通基础账号映射能力,Ranger 实现界面化权限策略管理。
提供给用户进行数据安全分级的定义和管理的能力,支持审计和风险识别,建立敏感数据管控体系。
WeData 新版本接入腾讯云数据安全中心在资产清查、风险评估、数据保护、风险检测以及数据持续运营等方面进行了全面提升。
应用场景:
数据安全管控+静/动态脱敏:全方面数据安全防护
您可通过数据权限管控对数据权限进行统一管理,通过数据脱敏对敏感数据进行脱敏处理,避免敏感数据泄露。
数据建模能力全新升级,让数据结构更清晰,洞察更深入
功能说明:
腾讯云 WeData 融合了建模工具 DDM(Datablau Data Modeler)打造了从数据建模到数据同步、开发与治理的一站式联合解决方案。
通过数据建模,您可以将数据模型设计、引标落标等能力引入到数据开发流程中,帮助您进行数据资产的全生命周期规范化管理,提升企业内数据资产价值。
应用场景:
通过 WeData 数据建模工具,可以实现全生命周期的数据中台数仓模型管控体系建设。
事前规范:统一建模工具,规范化模型设计;
事中评审:增加模型评审环节,保障模型落标率;
事后监控:部署生产后,通过模型检查保障数据一致性、完整性。
支持更多数据源,满足你的多样化需求
功能说明:
数据集成通过快速连接和融合云上或云下自建的各种数据,解决数据平台构建、数据库迁移备份,以及业务升级、整合,数据访问加速、全文检索等多个场景中数据整合和同步问题。
腾讯云 WeData 新版本支持更多数据源,目前 WeData 整库实时同步已支持 18 条迁移链路;离线同步支持 36 类来源端和 35 类目标端数据源。
应用场景:
离线同步
您可以定期运行方式
批量读取来源库表中数据并同步写入至目标端
实时同步
您可以使用实时数据同步能力
包括单表、分库分表、多库多表粒度对数据进行同步
包括单表同步、整库同步、以及日志采集
● 单表同步:来源端为单张表或分库分表,目标端仅支持一张表。
● 整库同步:整库同步支持将来源端整个实例、或者指定的多个库表对象内的全部数据同步至目标端的多张表中。
DataOps 更加完善,开发效率翻倍提升
功能说明:
WeData 数据开发为数据工程师以及数据开发角色提供了高效、协作、智能的数据开发平台。WeData 数据开发模块面向各类引擎(EMR、数据湖计算 DLC、腾讯云数据仓库 TCHouse-P 等),通过提供脚本开发、可视化开发、任务编排、任务发布以及任务运维等能力,帮助组织和企业高效构建数据仓库。
腾讯云 WeData 新版本在开发效率方面做了较大提升,如批量操作,自定义调度依赖,可让开发者更快速的管理、维护开发任务。
应用场景:
批量操作
您可以对所有计算任务进行批量操作
包含批量提交、批量修改调度参数等
自定义调度依赖
您可以设置同一任务不同实例间的依赖关系
支持设置上下游任务间的依赖关系
并可灵活设置依赖参数
让任务运行更及时更懂业务
运维告警更全面,问题发现处理更及时
功能说明:
WeData 提供全面的运维告警体系,通过告警功能,您可以为每个同步任务提供基于不同指标及告警阈值的创建任务告警规则,一个任务支持创建多个不同告警级别、不同告警规则的告警监控。
支持通过规则状态、告警级别及告警指标进行筛选,并且支持通过规则名称搜索告警事件。
腾讯云 WeData 新版本支持查看实例全生命周期,并支持更多告警链路,并支持创建多种告警规则和告警指标和告警条件。
应用场景:
更精确的告警配置
通过定义告警规则、告警指标、告警条件,可以将不同情况的错误进行分级分类,帮助您更快速的了解最重要的错误,避免重要业务问题遗漏、升级。
更全面的实例详情
当收到报警后,开发者可根据报警提示,进入任务实例详情页面查看实例从生成到运行的全生命周期的运行情况,并可查看执行日志和报错内容,便于开发者快速定位问题,解决问题。
跨项目导入导出,无缝切换不同环境
功能说明:
WeData 数据开发治理平台满足各种复杂使用场景,当客户部署多套环境或者在不同项目中进行数据隔离时,需要满足任务数据在各个项目间的切换。
目前 WeData 支持将开发任务、变量、函数、事件导出为压缩包,并导入到其他项目中,实现数据跨项目的流转。
应用场景:
您可以使用导入导出功能实现开发和生产环境的隔离;或者是做项目的备份;以及快速创建一个测试环境。
联系我们
本文仅介绍了 WeData 新版本升级的能力,如果您想全面的了解 WeData 全部功能,可登录腾讯云 WeData 官网,或在腾讯云官网搜索 WeData。
售前咨询
当您需要购买咨询时,您可以直接通过售前咨询进行提问,会有专属客户经理在线为您解答,为您提供专业的上云方案。同时,您也可以直接致电销售人员,咨询热线:4009100100 转 1(工作日 9:00 - 18:00)。
售后支持
当您遇到问题需要处理时,您可以直接通过售后支持进行提问,腾讯云工程师 7 × 24 小时在线为您提供服务。同时,您也可以直接致电客服人员,寻求相应的帮助。
客服咨询:4009100100(7 × 24 小时)
备案帮助:4009100100 转 3(7 × 24 小时)
腾讯云助手
腾讯云助手是腾讯云为开发者提供的移动管理工具,可以帮助开发者在手机上快捷管理云资源和云账户,进行充值续费、管理工单备案等,同时联系客服快速获取帮助。通过腾讯云助手,开发者不论在何时何地,都可快速进行管理操作,提高管理效率。微信扫一扫下方二维码,立即体验腾讯云助手。
问答社区
问答社区是腾讯云为开发者提供的交流平台。该平台汇聚了云计算、人工智能、小程序、产品文档等热门标签版块。您可以登录问答社区进行提问,会有产品专家或热心用户对您提出的问题,进行相应解答、探讨和指导。
平台入口(复制网址通过浏览器访问):
评论