InfoQ 写作平台 - 方寸之间，书写天地

Sparksql

0 人感兴趣 · 5 次引用

 关注

推荐
最新

https://static001.geekbang.org/infoq/33/334b30c01f13cf5d41036a48c85e6226.png?x-oss-process=image/resize,w_416,h_234

推荐系统大规模特征工程与 FEDB 的 Spark 基于 LLVM 优化

范式AI云 2020 年 7 月 13 日

今天给大家分享第四范式在推荐系统大规模特征工程与Spark基于LLVM优化方面的实践，主要包括以下四个主题。

spark Sparksql 推荐系统 LLVM FEDB

https://static001.geekbang.org/infoq/e3/e38e6a80e0572504ce44bde0e186e718.png?x-oss-process=image/resize,w_416,h_234

半小时，将你的 Spark SQL 模型变为在线服务

范式AI云 2020 年 7 月 8 日

第四范式已经在很多行业落地了上万个AI应用，比如在金融行业的反欺诈，媒体行业的新闻推荐，能源行业管道检测，而SparkSQL在这些AI应用中快速实现特征变换发挥着重要的作用

Python spark Sparksql Apache Spark 数据模型

同行分析优化

誓约·追光者 2020 年 8 月 17 日

对数据分析中的同行从逻辑上做了一个简单的优化，解决了内存问题和重复计算问题

Sparksql 优化

时空碰撞优化系列·一

誓约·追光者 2020 年 9 月 22 日

spark SQL时空碰撞

hive 数据分析 Sparksql 计算效率优化

时空碰撞优化系列·二

誓约·追光者 2020 年 9 月 22 日

对之前的方案补充了计算量上的优化

hive Sparksql 计算效率优化