mapreduce

0 人感兴趣 · 10 次引用

  • 推荐
  • 最新

通过 MapReduce 降低服务响应时间

用户头像
Kevin Wan 2020 年 10 月 15 日

在微服务中开发中,api网关扮演对外提供restful api的角色,而api的数据往往会依赖其他服务,复杂的api更是会依赖多个甚至数十个服务。虽然单个被依赖服务的耗时一般都比较低,但如果多个服务串行依赖的话那么整个api的耗时将会大大增加。

https://static001.geekbang.org/infoq/91/918589b90f9e80c285c34fa2a3dcfafe.png?x-oss-process=image/resize,w_416,h_234

MapReduce 简介及过程详解

用户头像
犟马骝 2020 年 10 月 20 日

MapReduce是面向大数据并行处理的计算模型、框架和平台,对于大数据开发或者想要接触大数据开发的开发者来说,是必须要掌握的,它是一种经典大数据计算框架,现在有很多开源项目的内部实现都会直接或间接地借鉴了MR过程的实现。Hadoop中的MapReduce 是一个离

https://static001.geekbang.org/infoq/27/2774ed9092d31ea4d4394671a511c8b7.png?x-oss-process=image/resize,w_416,h_234

Hadoop 集群搭建 -01 前期准备

用户头像
虚拟世界的懒猫 2020 年 5 月 1 日

整个搭建hadoop集群的流程,包括 前期准备 安装zookeeper并配置环境 编译安装hadoop并启动 安装HDFS管理namenode和dataname管理集群硬盘资源 安装启动yarn建立MapReduce管理cpu和内存资源

译文 MapReduce: 大型集群上的简化数据处理

用户头像
海神名 2020 年 5 月 4 日

MapReduce: Simplified Data Processing on Large Clusters 译文。本人英语渣渣,翻译大部分借助DeepL这个工具,并稍加处理,哈哈。

https://static001.geekbang.org/infoq/7a/7a5acc0439d9a124126b3a2d510196b5.jpeg?x-oss-process=image/resize,w_416,h_234

大数据解答 (一)

用户头像
dony.zhang 2020 年 9 月 2 日

公司大数据应用场景, MapReduce执行过程中的输入输出

一个例子理解 MapReduce 的运行原理

用户头像
林昱榕 2020 年 9 月 2 日

MapReduce分布式计算引擎的编程模型分为两部分,即map和reduce。理解其运行机制的核心关键点是理解map和reduce这两个方法的输入和输出分别是什么。理解这一点,我们就理解了MapReduce的运行机制。

https://static001.geekbang.org/infoq/cc/ccd34248a2954ab51274c447889b3264.jpeg?x-oss-process=image/resize,w_416,h_234

架构师训练营第 12 周作业

用户头像
王友 2020 年 9 月 2 日

大半夜地手指在机械键盘上飞舞,忙碌一天的疲惫脸庞已然失去了荣光,最近课也没好好听,但是还是得好好地总结一下哈!

https://static001.geekbang.org/infoq/25/25557b710250321c8595200287c83a5b.jpeg?x-oss-process=image/resize,w_416,h_234

第 12 周命题作业

用户头像
hifly 2020 年 9 月 2 日

分析如下 HiveQL,生成的 MapReduce 执行程序,map 函数输入是什么?输出是什么,reduce 函数输入是什么?输出是什么?

mapreduce_mapreduce资料文章-InfoQ写作平台