大数据处理

1. 目前我接触的行业

2. 我接触企业是如何使用大数据的

3. 后续感悟



• 目前我接触的企业

目前我接触的企业有在线客服行业和安全领域的数据分析，在客户行业，我们的大数据相对来说没有使用hadoop or hive 这一套系统，而是使用大量es 等，容易查询分析的系统，后来去了一家安全公司，使用hive,sprak 来分析数据，形成最终的数据分析结果

• 我接触的企业是如何使用大数据的

目前我接触的企业使用大数据都是相对来说比较原始的，没有特别的多的招式，在客服行业，就是简单的使用es 进行聚合就可以了，不需要分析事件的前后因果关系，在安全行业，因为数据是不连续的，所以我们需要分析事件是否存在前后关系，而使用了spark。

• 感悟

因为做大数据的场景不是特别的多，所以也比较苦逼，对大数据的理解还是比较差的