分布式计算
0 人感兴趣 · 24 次引用
- 最新
- 推荐
分布式计算技术(下):Impala、Apache Flink、星环 Slipstream
实时计算的发展历史只有十几年,它与基于数据库的计算模型有本质区别,实时计算是固定的计算任务加上流动的数据,而数据库大多是固定的数据和流动的计算任务,因此实时计算平台对数据抽象、延时性、容错性、数据语义等的要求与数据库明显不同。
分布式计算技术(上):经典计算框架 MapReduce、Spark 解析
当一个计算任务过于复杂不能被一台服务器独立完成的时候,我们就需要分布式计算。分布式计算技术将一个大型任务切分为多个更小的任务,用多台计算机通过网络组装起来后,将每个小任务交给一些服务器来独立完成,最终完成这个复杂的计算任务。
RocketMQ Flink Catalog 设计与实践
RocketMQ Flink Catalog 使用指南
Hologres 共享集群助力淘宝订阅极致精细化运营
淘宝订阅是基于C-B关系的用户/商家双私域产品,用户侧与推荐-猜你喜欢互补,构建订阅-我的喜欢心智。商家侧与商家深度联动,结构化,自动化引入优质供给,帮助商家更好地运营粉丝会员。
小迈科技 X Hologres:高可用的百亿级广告实时数仓建设
通过本文,我们将会介绍小迈科技如何通过Hologres搭建高可用的实时数仓。
为什么要开发分布式操作系统
Laxcus分布式操作系统是专门面对云端市场研发的操作系统,它将大量计算机聚合到一起,实现了终端、边缘端、云端的互联互通互操作,用统一的分布式框架和编程接口,还有一体化的存储计算方案,简化了大型计算存储业务开发、使用、管理维护问题。
阿里云云原生一体化数仓入选 2022 数博会“十佳大数据案例”
阿里云云原生一体化数仓入选 2022数博会“十佳大数据案例”
Laxcus 分布式操作系统三代 UI 演进之路
UI做为实现人机交互的入口,一直是Laxcus分布式操作系统的重点研发对象,目前已经发展到第三代,经历了从字符界面到图形界面的发展过程。这个发展过程,极似当年的Dos、Windows、Linux,把它们曾经在UI界面上走过的路,一个不拉地走了一遍。路上遇到的坑,出
数据湖揭秘—Delta Lake
Delta Lake 是 DataBricks 公司开源的、用于构建湖仓架构的存储框架。能够支持 Spark,Flink,Hive,PrestoDB,Trino 等查询/计算引擎。作为一个开放格式的存储层,它在提供了批流一体的同时,为湖仓架构提供可靠的,安全的,高性能的保证。
湖仓一体,Hologres 加速云数据湖 DLF 技术原理解析
本期我们将带来Hologres高性能分析引擎加速查询云数据湖DLF的技术原理解析。
都是分布式操作系统,Laxcus 和鸿蒙有何不同?
很多用户在初次听到Laxcus分布式操作系统时,因为“分布式操作系统”这个名词,想当然把Laxcus和鸿蒙划上等号。其实熟悉Laxcus分布式操作系统的人都知道,这两个产品除了操作系统本身这个属性之外,几乎没有相同之处,就连“分布式”也不是一个概念。今天不谈
Hive on Spark 和 Spark sql on Hive,你能分的清楚么
摘要:结构上Hive On Spark和SparkSQL都是一个翻译层,把一个SQL翻译成分布式可执行的Spark程序。
Tensorflow for Java + Spark-Scala 分布式机器学习计算框架的应用实践
Qunar 智能风控场景中,风控研发团队经常会应用一些算法模型,来解决复杂场景问题。典型的如神经网络模型,决策树模型等等。本篇文章将和大家分享一下,在预测服务部署阶段,基于 Tensorflow for Java 和 Spark-Scala 构建分布式机器学习计算框架的实践经验。