实时计算

9 人感兴趣 · 58 次引用

  • 推荐
  • 最新
https://static001.geekbang.org/infoq/8e/8ebcc0c8930fd5df384829cbd8859fa4.png?x-oss-process=image/resize,w_416,h_234

扎心!天天写代码,方向真的对吗?

用户头像
Apache Flink 2020 年 5 月 8 日

“每个人的时间都是有限的,在有限的时间里选择一项值得投入的技术会变得尤为重要。”

https://static001.geekbang.org/infoq/95/9585533e5dbae2ff7cb8c5b7b9d56608.png?x-oss-process=image/resize,w_416,h_234

Kafka 系列第 7 篇:你必须要知道集群内部工作原理的一些事!

用户头像
z小赵 2020 年 5 月 19 日

Partition如何分布到不同的Broker上,Broker宕机Partition依然可用背后的原理介绍。

https://static001.geekbang.org/infoq/6b/6b2d9cf3c9f2b1819839753c0eef0e3f.png?x-oss-process=image/resize,w_416,h_234

Flink 完美搭档:数据存储层上的 Pravega

用户头像
Apache Flink 2020 年 5 月 25 日

本文将从大数据架构变迁历史,Pravega 简介,Pravega 进阶特性以及车联网使用场景这四个方面介绍 Pravega,重点介绍 DellEMC 为何要研发 Pravega,Pravega 解决了大数据处理平台的哪些痛点以及与 Flink 结合会碰撞出怎样的火花。

https://static001.geekbang.org/infoq/c4/c4b61a3f6b6a750121e6fdd46412e600.png?x-oss-process=image/resize,w_416,h_234

数仓系列 | Flink 窗口的应用与实现

用户头像
Apache Flink 2020 年 6 月 10 日

简介: 本文根据 Apache Flink 系列直播整理而成,由 Apache Flink Contributor、OPPO 大数据平台研发负责人张俊老师分享。主要内容如下: 1. 整体思路与学习路径 2. 应用场景与编程模型 3. 工作流程与实现机制

https://static001.geekbang.org/infoq/a4/a4469e06e74c3d1b3bd3a96c81423a61.png?x-oss-process=image/resize,w_416,h_234

Kafka 系列第 6 篇:消息是如何在服务端存储与读取的,你真的知道吗?

用户头像
z小赵 2020 年 5 月 13 日

消息存储也就那点事儿,你确定不需要了解一下吗?

https://static001.geekbang.org/infoq/74/742e9eec39a7aa43cdf6de230d13795e.png?x-oss-process=image/resize,w_416,h_234

TensorFlow On Flink 原理解析

用户头像
Apache Flink 2020 年 5 月 12 日

简介: 本文将分享如何使用一套引擎搞定机器学习全流程的解决方案。先介绍一下典型的机器学习工作流程。如图所示,整个流程包含特征工程、模型训练、离线或者是在线预测等环节。

https://static001.geekbang.org/infoq/b9/b9b0123455327914e72368e30a18a441.png?x-oss-process=image/resize,w_416,h_234

Kafka 系列第 5 篇:一文读懂消费者背后的那点"猫腻"

用户头像
z小赵 2020 年 5 月 8 日

图文并茂的方式来扒开Kafka消费端背后发生的那点猫腻。

https://static001.geekbang.org/infoq/c5/c5d5e1d07a6f977d1536ad117037cba4.png?x-oss-process=image/resize,w_416,h_234

实时计算的业务劣势、思维误区和改进之道

用户头像
KAMI 2020 年 8 月 4 日

实时计算的技术优势,反倒成为其业务劣势?为什么?如何破?本文不讨论技术细节,对数据业务感兴趣同学都建议一读。

https://static001.geekbang.org/infoq/f9/f9c8f332de34ac7fa93efb701317ea22.png?x-oss-process=image/resize,w_416,h_234

Flink 与 Hive 的磨合期

用户头像
Apache Flink 2020 年 5 月 20 日

有不少读者反馈,参考上篇文章《Hive 终于等来了 Flink》部署 Flink 并集成 Hive 时,出现一些 bug 以及兼容性等问题。虽已等来,却未可用。所以笔者增加了这一篇文章,作为姊妹篇。

https://static001.geekbang.org/infoq/92/92cc0c80fb7de5936f4e663001747353.jpeg?x-oss-process=image/resize,w_416,h_234

Flink 1.10 Container 环境实战

用户头像
Apache Flink 2020 年 6 月 10 日

简介: 本文第一部分将简明扼要地介绍容器管理系统的演变;第二部分是 Flink on K8S 简介,包括集群的部署模式调度原理等等;第三部分是我们这一年以来关于 Flink on K8S 的实战经验分享,

https://static001.geekbang.org/infoq/d4/d45f3abca311e9b6d0255ea5b78bf70d.png?x-oss-process=image/resize,w_416,h_234

如何从 0 到 1 参与 Flink 社区?

用户头像
Apache Flink 2020 年 6 月 10 日

简介: 本文首先介绍为何要参与开源社区以及在参与开源社区的过程中需要注意什么,然后重点介绍如何参与 Flink 社区以及在社区里面提交 PR 的整个流程。

https://static001.geekbang.org/infoq/d0/d07a116d3ccaf91f172db0cbda8ac643.png?x-oss-process=image/resize,w_416,h_234

Kafka 系列第 1 篇:Kafka 是什么?它能干什么?

用户头像
z小赵 2020 年 5 月 3 日

kafka是什么?它能干什么?本篇文章我们来帮你解答这些疑问。

https://static001.geekbang.org/infoq/e2/e26e85f82db0998a6979bfc7e67e99d3.png?x-oss-process=image/resize,w_416,h_234

Flink 1.10 细粒度资源管理解析

用户头像
Apache Flink 2020 年 5 月 12 日

对于作业规模不大的普通用户而言,这些通常在可以接受的范围之内

https://static001.geekbang.org/infoq/05/05382cc98f8f853cf564ab4b068212a7.png?x-oss-process=image/resize,w_416,h_234

这场大数据 +AI Meetup,一次性安排了大数据当下热门话题

用户头像
Apache Flink 2020 年 6 月 3 日

简介: 6月14日,阿里巴巴计算平台事业部与阿里云开发者社区共同举办的大数据+AI Meetup 系列第一季即将重磅开启,此次 Meetup 邀请了来自阿里巴巴、Databricks、快手、网易云音乐的7位技术专家,集中解读大数据当前热门话题!

https://static001.geekbang.org/infoq/4f/4f8aacdd50e4e5089a68359d73ac58b3.png?x-oss-process=image/resize,w_416,h_234

Kafka 系列第 2 篇:安装测试

用户头像
z小赵 2020 年 5 月 3 日

动手实践搭建kafka测试环境,不信学不会。

https://static001.geekbang.org/infoq/c7/c7525390a22e8d2c3661e9b63dcd4ffc.png?x-oss-process=image/resize,w_416,h_234

这场大数据 +AI Meetup,一次性安排了大数据当下热门话题

用户头像
Apache Flink 2020 年 5 月 29 日

简介: 6月14日,阿里巴巴计算平台事业部与阿里云开发者社区共同举办的大数据+AI Meetup 系列第一季即将重磅开启,此次 Meetup 邀请了来自阿里巴巴、Databricks、快手、网易云音乐的7位技术专家,集中解读大数据当前热门话题!

https://static001.geekbang.org/infoq/e5/e550a45eb360a4c5c846fccae95b022a.png?x-oss-process=image/resize,w_416,h_234

Kafka 系列第 4 篇:消息发送时,网络“偷偷”帮忙做的那点事儿

用户头像
z小赵 2020 年 5 月 3 日

Kafka消息发送时,网络帮忙做了哪些工作,了解一下。

https://static001.geekbang.org/infoq/7e/7e5aa4ca2f6b7170f01839ed8eea5162.jpeg?x-oss-process=image/resize,w_416,h_234

都在说实时数据架构,你了解多少?

用户头像
Apache Flink 2020 年 4 月 29 日

简介: 本文从上述现状及实时数据需求出发,结合工业界案例、笔者的实时数据开发经验, 梳理总结了实时数据体系建设的总体方案。

https://static001.geekbang.org/infoq/cf/cf336382e6a67f45a3e6bb7118aec0de.png?x-oss-process=image/resize,w_416,h_234

Flink 在快手实时多维分析场景的应用

用户头像
Apache Flink 2020 年 6 月 18 日

简介: 作为短视频分享跟直播的平台,快手有诸多业务场景应用了 Flink,包括短视频、直播的质量监控、用户增长分析、实时数据处理、直播 CDN 调度等。此次主要介绍在快手使用 Flink 在实时多维分析场景的应用与优化。

https://static001.geekbang.org/infoq/6b/6b0c307d56ecdc4176f25ddf7523b06e.jpeg?x-oss-process=image/resize,w_416,h_234

免费下载 | 阿里云实时计算整体解决方案白皮书重磅发布!

用户头像
Apache Flink 2020 年 6 月 18 日

简介: 为更好的助力各行各业实现企业数字化转型,为企业的创新、重构核心竞争力提供坚实支撑;阿里云实时计算重磅推出金融、物流、IoT、广告等行业整体解决方案白皮书。

https://static001.geekbang.org/infoq/80/8082b38079bb99d86d4d29733823a2af.jpeg?x-oss-process=image/resize,w_416,h_234

Iceberg 在基于 Flink 的流式数据入库场景中的应用

用户头像
Apache Flink 2020 年 4 月 29 日

简介: 本文以流式数据入库的场景为基础,介绍引入 Iceberg 作为落地格式和嵌入 Flink sink 的收益,并分析了当前可实现的框架及要点。

https://static001.geekbang.org/infoq/4c/4c2df5ced82c951c549012d7c30680bd.jpeg?x-oss-process=image/resize,w_416,h_234

祝贺!两位 Apache Flink PMC 喜提 Apache Member

用户头像
Apache Flink 2020 年 4 月 29 日

简介: 目前,国内(华人)近 30 位 Apache Member 中,有 3 位是 Apache Flink 的核心贡献者。他们热爱开源也为开源贡献,不仅积极参与社区与其他 PMC 成员共同规划、主导 Apache Flink 的发展,更活跃在多个开源项目,持续为开源社区做贡献。

https://static001.geekbang.org/infoq/88/884afb782e185adcabed334dec26b371.jpeg?x-oss-process=image/resize,w_416,h_234

Flink 消息聚合处理方案

用户头像
Apache Flink 2020 年 4 月 29 日

简介: 在本篇文章中我们将详细介绍 Flink 中对消息进行聚合处理的方案,描述不同方案中可能遇到的问题和解决方法,并进行对比。

https://static001.geekbang.org/infoq/ab/ab76276dfe51aa0e9d1381a9a66a1ac2.png?x-oss-process=image/resize,w_416,h_234

深度解读 Flink 1.11:流批一体 Hive 数仓

用户头像
Apache Flink 2020 年 6 月 1 日

简介: Flink 1.11 中流计算结合 Hive 批处理数仓,给离线数仓带来 Flink 流处理实时且 Exactly-once 的能力。另外,Flink 1.11 完善了 Flink 自身的 Filesystem connector,大大提高了 Flink 的易用性。

https://static001.geekbang.org/infoq/51/51818cac96dffad613d20e3ed3e7b617.jpeg?x-oss-process=image/resize,w_416,h_234

大数据的下一站是什么?服务 / 分析一体化(HSAP)

用户头像
Apache Flink 2020 年 6 月 14 日

简介: 大数据的下一站是什么?服务/分析一体化(HSAP)

https://static001.geekbang.org/infoq/25/2518618c7066c5729c383db312eb9977.jpeg?x-oss-process=image/resize,w_416,h_234

最佳实践 | Flink Forward 全球会议抢先看!

用户头像
Apache Flink 2020 年 4 月 29 日

简介: 来了!我们把 Apache 顶级项目盛会搬到线上,4月25-26日,Flink Forward 全球在线会议精华版直播将正式上线,该系列直播均为中文版,精选大会优质内容由 Apache Flink 核心贡献者们对原版英文 talk 进行翻译及解说,您可直接免费在线观看!

实时计算_实时计算资料文章-InfoQ写作平台