一点思考
昨天和平台的资深工程师交流,他回答我的车联网相关的问题;
1、网关是干什么?
网关负责与设备连接,数据到达网关之后,网关向设备发送确认应答;
网关解析报文头信息,根据一定的策略,把相关的数据 hash 到不同的 partition,使得同一个终端在一个分区,加快解析并发处理的同时,也能够保持有序性;
2、解析的作用是什么?
解析数据读取 kafka 的报文 payload, 按照协议的相关定义,解析出其意义;比如实时工况,轨迹录入相应的存储系统,比如 hbase,clickhouse;
3、离线计算的作用是什么?
离线计算的目的把离散的工况数据,按照实际情况进行统计;
评论