写点什么

计算引擎

0 人感兴趣 · 10 次引用

  • 最新
  • 推荐

Vineyard 论文被 SIGMOD'2023 接收,助力计算引擎之间高效数据交换

Vineyard 论文被 SIGMOD'2023 接收,助力计算引擎之间高效数据交换

查询语句写了 limit 1,为什么依然很慢?

很多时候计算引擎会对语句进行代价估计并调整语句的执行顺序。执行计划是语句如何执行的直观表达。语句如何执行不能只关注语句写法,要想写出符合预期执行顺序的查询语句,还需要关注语句执行计划。

https://static001.geekbang.org/infoq/55/55e72734d18778183e2822fd90ac0cad.jpeg?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

极光笔记丨 Spark SQL 在极光的建设实践

用户头像
极光JIGUANG
2021-11-09

Spark在2018开始在极光大数据平台部署使用,历经多个版本的迭代,逐步成为离线计算的核心引擎。当前在极光大数据平台每天运行的Spark任务有20000+,执行的Spark SQL平均每天42000条,本文主要介绍极光数据平台在使用Spark SQL的过程中总结的部分实践经验

https://static001.geekbang.org/infoq/3a/3a95635d83e82fb4d6fbc5fa1ba18c7f.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

新版本发布!openLooKeng v1.4.0 上线

用户头像
openLooKeng
2021-11-08

金秋10月, openLooKeng 新版本 v1.4.0 正式发布。基于社区用户和开发者的体验和建议,新版本在原基础上进行了一些优化,以提升引擎性能。欢迎大家下载体验。

https://static001.geekbang.org/infoq/d8/d8cec918c770c586f4a566765aec71e5.jpeg?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

超简单教程!自动部署 openLooKeng

用户头像
openLooKeng
2021-11-08

​除了手动部署openLooKeng服务器外,还可以按照以下指导更快、更容易地完成部署。这个脚本对大多数Linux操作系统都很友好。但是,对于Ubuntu,需要手动安装以下依赖项。

基于 Hive Connector 的 openLooKeng Connector 创建复用机制剖析

用户头像
openLooKeng
2021-11-08

openLooKeng是一款开源的高效数据虚拟化分析引擎。本期,来自光大银行的小伙伴将为我们分享一篇博客,[基于Hive Connector的openLooKeng Connector创建复用机制剖析],非常感谢这位小伙伴的投稿。

https://static001.geekbang.org/infoq/d5/d53ae8a67d048dbb92823e9fd3983ad7.jpeg?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

超详细攻略!手把手教你如何在 windows 下搭建 openLooKeng 开发环境

用户头像
openLooKeng
2021-11-08

当我们在进行openLooKeng的项目任务时,很多情况下需要在openLooKeng下进行开发调试,但只有windows 电脑的我们该怎么做?本期,小助手将介绍在Windows下搭建openLooKeng开发环境的方法,希望对朋友们有帮助。如果您有任何想要交流的,欢迎在社区内提Issue;

从 0 到 1 搭建大数据平台之计算存储系统

用户头像
数据社
2020-08-04

前面已经给大家讲了《从0到1搭建大数据平台之数据采集系统》、《从0到1搭建大数据平台之调度系统》,今天给大家讲一下大数据平台计算存储系统。大数据计算平台目前主要都是围绕着hadoop生态发展的,运用HDFS作为数据存储,计算框架分为批处理、流处理。

计算引擎_计算引擎技术文章_InfoQ写作社区