RDD_RDD技术文章_InfoQ写作社区

RDD

0 人感兴趣 · 7 次引用

关注

2022-04-22

相比MapReduce僵化的Map与Reduce分阶段计算相比，Spark的计算框架更加富有弹性和灵活性，运行性能更佳。

2021-12-02

RDD转换DataFrame之Reflection方法

2021-07-18

写在前面：大家好，我是强哥，一个热爱分享的技术狂。目前已有 12 年大数据与AI相关项目经验， 10 年推荐系统研究及实践经验。平时喜欢读书、暴走和写作。

2021-07-15

2021-04-27

RDD是Spark的基本数据抽象，利用将数据存储在内存；分区存储使得其天然支持并行；存储依赖关系提升错误恢复，基于RDD的论文介绍了RDD的一些概念和实现思想

2020-10-22

写该文章的目的是对过去一段时间自我学习知识的总结，通过对职责驱动设计（RDD）的学习发现通过该模式进行对领域职责进行划分能够得出很清晰的职责，能有效减少无结论的掰扯，后面部分也有些在实际中的运用，期望能和大家交流起来～

2020-08-23

Pyspark RDD基础操作