写点什么

最佳实践数据服务之设备数据格式 ProtoBuf 转 JSON——实践类

作者:阿里云AIoT
  • 2023-02-15
    浙江
  • 本文字数:1401 字

    阅读完需:约 5 分钟

最佳实践——数据服务之设备数据格式 ProtoBuf 转 JSON

本文介绍如何使用阿里云物联网平台的数据服务之数据解析功能实现设备数据格式 ProtoBuf 转 JSON 以及窗口聚合和插值计算。


背景信息

ProtoBuf 和 JSON 是目前两种主流网络数据结构,有着各自的特点和应用场景,随着物联网应用的场景复杂,不同场景下数据交换上有了新的要求。JSON 主要应用于 Web 浏览器到服务器数据传输,ProtoBuf 主要用于客户端到服务器端高效安全数据传输。若能实现两者的转换,可以促进数据交互,极大地提高开发效率。另外在物联网设备数据中,存在数据质量不稳定,设备上报的数据可能会受所处网络或者复杂工况影响,与典型的互联网数据对比往往需要进行数据预处理,比如插值计算和采样等。阿里云物联网平台即可通过数据服务之数据解析功能实现设备数据格式 ProtoBuf 转 JSON 以及窗口聚合和插值计算等。


操作步骤概要

1 进入物联网平台控制台,开通企业版实例,和数据服务相关的是如下 4 个规格。控制台地址:https://iot.console.aliyun.com



2 开通完成后,点击企业版实例卡片进入实例详情页,再点击数据服务进入数据相关的功能页。


3 进入数据服务-数据解析功能页,创建数据解析任务。




4 点击查看进入任务编辑画布,配置数据源节点,选择设备上报数据的 Topic(支持通配)。


5Topic 格式选择 ProtoBuf,完成样例数据配置和校验。单击上传.desc 文件,上传.desc 文件,用于解析 ProtoBuf 格式数据。生成.desc 文件方法,请参见附录:生成.desc文件。选择消息类型后,单击上传二进制数据文件,配置样例数据。配置样例数据后,单击校验解析:若解析成功,可在解析预览中查看数据。若解析失败,则根据提示,修正样例数据后,重新校验。



6 选择消息类型后,单击上传二进制数据文件,配置样例数据。配置样例数据后,单击校验解析:若解析成功,可在解析预览中查看数据。若解析失败,则根据提示,修正样例数据后,重新校验。


7 完成数据解析的源节点配置后,您可根据源节点的数据,配置字段和表达式,添加筛选器。通过解析生成多样化的数据,可用于后续分析或输出。


8 完成数据解析的处理配置后,您可根据处理节点的输出字段,完成 Topic 解析任务最终的输出配置。在数据解析工作台左侧的节点列表中,拖拽目标节点到中间画布,选中目标节点,在目标节点面板,选择目标类型及其具体配置。


9 目标节点配置完成后,您需对数据解析任务进行调试和发布,投递到 Topic 的就是 JSON 格式。在数据解析工作台,单击画布左上方的校验

图标。若校验成功,则可发布上线。单击画布下方的数据结构,可查看解析后的对应内容。若校验失败,则出现报错。根据提示修正配置后,重新调试。调试成功后,单击页面右上角的启动。单击启动后,跳转至数据解析页面,启动任务显示状态为启动中。启动后的数据解析任务状态会自动更新为在线,请耐心等待。




相关产品文档

1 创建数据解析任务:https://help.aliyun.com/document_detail/307083.html

2 配置源节点:https://help.aliyun.com/document_detail/307085.html

3 附录:生成.desc 文件教程:https://help.aliyun.com/document_detail/307085.html

4 配置表达式和筛选器:https://help.aliyun.com/document_detail/307086.html

5 配置目标节点:https://help.aliyun.com/document_detail/307087.html

6 校验与发布:https://help.aliyun.com/document_detail/307088.html

 

物联网平台产品介绍详情:https://www.aliyun.com/product/iot/iot_instc_public_cn


阿里云物联网平台客户交流群

用户头像

阿里云AIoT

关注

物联网内容搬运者 2022-04-22 加入

还未添加个人简介

评论

发布
暂无评论
最佳实践数据服务之设备数据格式ProtoBuf转JSON——实践类_阿里云_阿里云AIoT_InfoQ写作社区