0 人感兴趣 · 9 次引用
mydata使用API方式集成数据,当一次请求或响应 传输数据量较多时 可能无法完成、或容易对服务端造成影响,因此需要分为多次处理; mydata集成时,在提供数据和消费数据这两个方向上分别实现分批传输;
根据采集周期间隔长短、推送是否订阅可以组合成4种模式:短周期采集 + 订阅推送、短周期采集 + 长周期推送、长周期采集 + 订阅推送、长周期采集 + 长周期推送;
MyData ,一个旨在简化 Web 应用之间数据对接的工具,提高日常工作效率,如其名“我的数据” 旨在让用户更好的掌控和管理数据。 v0.7.3 主要更新内容:提高环境变量安全性、增加数据过滤条件;
MyData基于数据资产理念设计,采用Web API作为数据传输通道 完全不侵入任何业务系统;
mydata v0.7.2 完善数据集成场景:支持环境变量的定时更新、跨环境数据集成、任务跨环境复制;
MyData的后端由3个子服务组成,分别是管理服务、任务服务、业务数据服务; 任务主要包括:项目环境、数据标准、应用API、任务类型、字段映射、任务周期;
MyData v0.7.1版本主要提供 在项目范围内多个环境的数据集成,通过定时任务调用应用的API 获取、存储和消费业务数据;
用Docker部署 MyData
MyData ,一个旨在简化 Web 应用之间数据对接的工具,提高日常工作效率,如其名“我的数据” 旨在让用户更好的掌控和管理数据。
一个日语专业的程序猿。
提供全面深入的云计算技术干货
InfoQ签约作者
还未添加个人签名
专注分享阿里技术的丰富实践和前沿创新。