流计算

5 人感兴趣 · 80 次引用

  • 推荐
  • 最新
https://static001.geekbang.org/infoq/8e/8ebcc0c8930fd5df384829cbd8859fa4.png?x-oss-process=image/resize,w_416,h_234

扎心!天天写代码,方向真的对吗?

用户头像
Apache Flink 2020 年 5 月 8 日

“每个人的时间都是有限的,在有限的时间里选择一项值得投入的技术会变得尤为重要。”

https://static001.geekbang.org/infoq/6b/6b2d9cf3c9f2b1819839753c0eef0e3f.png?x-oss-process=image/resize,w_416,h_234

Flink 完美搭档:数据存储层上的 Pravega

用户头像
Apache Flink 2020 年 5 月 25 日

本文将从大数据架构变迁历史,Pravega 简介,Pravega 进阶特性以及车联网使用场景这四个方面介绍 Pravega,重点介绍 DellEMC 为何要研发 Pravega,Pravega 解决了大数据处理平台的哪些痛点以及与 Flink 结合会碰撞出怎样的火花。

https://static001.geekbang.org/infoq/c4/c4b61a3f6b6a750121e6fdd46412e600.png?x-oss-process=image/resize,w_416,h_234

数仓系列 | Flink 窗口的应用与实现

用户头像
Apache Flink 2020 年 6 月 10 日

简介: 本文根据 Apache Flink 系列直播整理而成,由 Apache Flink Contributor、OPPO 大数据平台研发负责人张俊老师分享。主要内容如下: 1. 整体思路与学习路径 2. 应用场景与编程模型 3. 工作流程与实现机制

https://static001.geekbang.org/infoq/74/742e9eec39a7aa43cdf6de230d13795e.png?x-oss-process=image/resize,w_416,h_234

TensorFlow On Flink 原理解析

用户头像
Apache Flink 2020 年 5 月 12 日

简介: 本文将分享如何使用一套引擎搞定机器学习全流程的解决方案。先介绍一下典型的机器学习工作流程。如图所示,整个流程包含特征工程、模型训练、离线或者是在线预测等环节。

https://static001.geekbang.org/infoq/e3/e3634a2979d547db3c9a961af33c2b87.png?x-oss-process=image/resize,w_416,h_234

Flink on Zeppelin (1)入门篇

用户头像
章剑锋_Jeff 2020 年 6 月 15 日

​  一直有人在Zeppelin社区问能否在Zeppelin里使用Flink。现在终于有了进展了,从Zeppelin 0.9开始将正式支持Flink 1.10。Flink是一个批流统一的计算引擎,本文将从第一个wordcount的例子为起点来讲述如何在Zeppelin中使用Flink。

https://static001.geekbang.org/infoq/92/92cc0c80fb7de5936f4e663001747353.jpeg?x-oss-process=image/resize,w_416,h_234

Flink 1.10 Container 环境实战

用户头像
Apache Flink 2020 年 6 月 10 日

简介: 本文第一部分将简明扼要地介绍容器管理系统的演变;第二部分是 Flink on K8S 简介,包括集群的部署模式调度原理等等;第三部分是我们这一年以来关于 Flink on K8S 的实战经验分享,

https://static001.geekbang.org/infoq/d4/d45f3abca311e9b6d0255ea5b78bf70d.png?x-oss-process=image/resize,w_416,h_234

如何从 0 到 1 参与 Flink 社区?

用户头像
Apache Flink 2020 年 6 月 10 日

简介: 本文首先介绍为何要参与开源社区以及在参与开源社区的过程中需要注意什么,然后重点介绍如何参与 Flink 社区以及在社区里面提交 PR 的整个流程。

https://static001.geekbang.org/infoq/e2/e26e85f82db0998a6979bfc7e67e99d3.png?x-oss-process=image/resize,w_416,h_234

Flink 1.10 细粒度资源管理解析

用户头像
Apache Flink 2020 年 5 月 12 日

对于作业规模不大的普通用户而言,这些通常在可以接受的范围之内

https://static001.geekbang.org/infoq/e3/e3634a2979d547db3c9a961af33c2b87.png?x-oss-process=image/resize,w_416,h_234

Flink on Zeppelin (2) - Batch 篇

用户头像
章剑锋_Jeff 2020 年 6 月 15 日

 在Flink on Zeppelin 入门篇 中我们讲述了如何配置Zeppelin + Flink来运行一个最简单的WordCount例子。本文将讲述如何使用Flink SQL + UDF来做Batch ETL和BI数据分析的任务。

https://static001.geekbang.org/infoq/05/05382cc98f8f853cf564ab4b068212a7.png?x-oss-process=image/resize,w_416,h_234

这场大数据 +AI Meetup,一次性安排了大数据当下热门话题

用户头像
Apache Flink 2020 年 6 月 3 日

简介: 6月14日,阿里巴巴计算平台事业部与阿里云开发者社区共同举办的大数据+AI Meetup 系列第一季即将重磅开启,此次 Meetup 邀请了来自阿里巴巴、Databricks、快手、网易云音乐的7位技术专家,集中解读大数据当前热门话题!

https://static001.geekbang.org/infoq/c7/c7525390a22e8d2c3661e9b63dcd4ffc.png?x-oss-process=image/resize,w_416,h_234

这场大数据 +AI Meetup,一次性安排了大数据当下热门话题

用户头像
Apache Flink 2020 年 5 月 29 日

简介: 6月14日,阿里巴巴计算平台事业部与阿里云开发者社区共同举办的大数据+AI Meetup 系列第一季即将重磅开启,此次 Meetup 邀请了来自阿里巴巴、Databricks、快手、网易云音乐的7位技术专家,集中解读大数据当前热门话题!

https://static001.geekbang.org/infoq/e3/e3634a2979d547db3c9a961af33c2b87.png?x-oss-process=image/resize,w_416,h_234

Apache Zeppelin:可能是开源届最好的 Flink 开发平台

用户头像
章剑锋_Jeff 2020 年 6 月 23 日

最近做了一系列Flink on Zeppelin的视频教程,整理出来分享在公众号上,希望对大家有所帮助。下面是大纲:

https://static001.geekbang.org/infoq/7e/7e5aa4ca2f6b7170f01839ed8eea5162.jpeg?x-oss-process=image/resize,w_416,h_234

都在说实时数据架构,你了解多少?

用户头像
Apache Flink 2020 年 4 月 29 日

简介: 本文从上述现状及实时数据需求出发,结合工业界案例、笔者的实时数据开发经验, 梳理总结了实时数据体系建设的总体方案。

https://static001.geekbang.org/infoq/cf/cf336382e6a67f45a3e6bb7118aec0de.png?x-oss-process=image/resize,w_416,h_234

Flink 在快手实时多维分析场景的应用

用户头像
Apache Flink 2020 年 6 月 18 日

简介: 作为短视频分享跟直播的平台,快手有诸多业务场景应用了 Flink,包括短视频、直播的质量监控、用户增长分析、实时数据处理、直播 CDN 调度等。此次主要介绍在快手使用 Flink 在实时多维分析场景的应用与优化。

https://static001.geekbang.org/infoq/6b/6b0c307d56ecdc4176f25ddf7523b06e.jpeg?x-oss-process=image/resize,w_416,h_234

免费下载 | 阿里云实时计算整体解决方案白皮书重磅发布!

用户头像
Apache Flink 2020 年 6 月 18 日

简介: 为更好的助力各行各业实现企业数字化转型,为企业的创新、重构核心竞争力提供坚实支撑;阿里云实时计算重磅推出金融、物流、IoT、广告等行业整体解决方案白皮书。

https://static001.geekbang.org/infoq/80/8082b38079bb99d86d4d29733823a2af.jpeg?x-oss-process=image/resize,w_416,h_234

Iceberg 在基于 Flink 的流式数据入库场景中的应用

用户头像
Apache Flink 2020 年 4 月 29 日

简介: 本文以流式数据入库的场景为基础,介绍引入 Iceberg 作为落地格式和嵌入 Flink sink 的收益,并分析了当前可实现的框架及要点。

https://static001.geekbang.org/infoq/4c/4c2df5ced82c951c549012d7c30680bd.jpeg?x-oss-process=image/resize,w_416,h_234

祝贺!两位 Apache Flink PMC 喜提 Apache Member

用户头像
Apache Flink 2020 年 4 月 29 日

简介: 目前,国内(华人)近 30 位 Apache Member 中,有 3 位是 Apache Flink 的核心贡献者。他们热爱开源也为开源贡献,不仅积极参与社区与其他 PMC 成员共同规划、主导 Apache Flink 的发展,更活跃在多个开源项目,持续为开源社区做贡献。

https://static001.geekbang.org/infoq/51/51818cac96dffad613d20e3ed3e7b617.jpeg?x-oss-process=image/resize,w_416,h_234

大数据的下一站是什么?服务 / 分析一体化(HSAP)

用户头像
Apache Flink 2020 年 6 月 14 日

简介: 大数据的下一站是什么?服务/分析一体化(HSAP)

https://static001.geekbang.org/infoq/88/884afb782e185adcabed334dec26b371.jpeg?x-oss-process=image/resize,w_416,h_234

Flink 消息聚合处理方案

用户头像
Apache Flink 2020 年 4 月 29 日

简介: 在本篇文章中我们将详细介绍 Flink 中对消息进行聚合处理的方案,描述不同方案中可能遇到的问题和解决方法,并进行对比。

https://static001.geekbang.org/infoq/57/57cb3642272cf0d48ff52533dcc376c5.png?x-oss-process=image/resize,w_416,h_234

复杂事件处理简介

用户头像
星际行者 2020 年 8 月 2 日

本文将从什么是CEP、CEP与流式计算、CEP分布式实现等几个方面简单介绍CEP。

https://static001.geekbang.org/infoq/5f/5f13dcba905f627a6c0156e127b4278d.jpeg?x-oss-process=image/resize,w_416,h_234

Flink 初体验

用户头像
WindyQin 2020 年 4 月 22 日

Apache Flink 是一个开源的分布式流处理和批处理系统。Flink 的核心是在数据流上提供数据分发、通信、具备容错的分布式计算。同时,Flink 在流处理引擎上构建了批处理引擎,原生支持了迭代计算、内存管理和程序优化。

https://static001.geekbang.org/infoq/ab/ab76276dfe51aa0e9d1381a9a66a1ac2.png?x-oss-process=image/resize,w_416,h_234

深度解读 Flink 1.11:流批一体 Hive 数仓

用户头像
Apache Flink 2020 年 6 月 1 日

简介: Flink 1.11 中流计算结合 Hive 批处理数仓,给离线数仓带来 Flink 流处理实时且 Exactly-once 的能力。另外,Flink 1.11 完善了 Flink 自身的 Filesystem connector,大大提高了 Flink 的易用性。

https://static001.geekbang.org/infoq/25/2518618c7066c5729c383db312eb9977.jpeg?x-oss-process=image/resize,w_416,h_234

最佳实践 | Flink Forward 全球会议抢先看!

用户头像
Apache Flink 2020 年 4 月 29 日

简介: 来了!我们把 Apache 顶级项目盛会搬到线上,4月25-26日,Flink Forward 全球在线会议精华版直播将正式上线,该系列直播均为中文版,精选大会优质内容由 Apache Flink 核心贡献者们对原版英文 talk 进行翻译及解说,您可直接免费在线观看!

https://static001.geekbang.org/infoq/e3/e3634a2979d547db3c9a961af33c2b87.png?x-oss-process=image/resize,w_416,h_234

Flink on Zeppelin (4) - 机器学习篇

用户头像
章剑锋_Jeff 2020 年 6 月 18 日

今天我来讲下如何在Zeppelin里做机器学习。机器学习的重要性我就不多说了,我们直奔主题。

https://static001.geekbang.org/infoq/1a/1a95242be03d58a30c07e9dcb5285730.jpeg?x-oss-process=image/resize,w_416,h_234

18 个 PPT,29 个提问解答,都在这儿啦!

用户头像
Apache Flink 2020 年 4 月 29 日

简介: 为期一天半的 Flink Forward 中文精华版在北京、上海、杭州三地进行联动直播,吸引了全球近 20000 人次开发者在线观看。除优质内容外,Flink Forward 精华版还首次开创问题征集,在线观看直播的同学可及时对嘉宾分享提出疑问并邀请讲师在线解答。

https://static001.geekbang.org/infoq/e3/e3634a2979d547db3c9a961af33c2b87.png?x-oss-process=image/resize,w_416,h_234

Flink on Zeppelin (5) 高级特性篇

用户头像
章剑锋_Jeff 2020 年 6 月 18 日

在Flink on Zeppelin系列的前面几篇文章中,我讲述了如何在Zeppelin里使用Flink的一些基本操作和配置, 中间也会穿插一些高级feature,但都比较零散,这篇文章会集中重点讲述一些非常实用的Flink on Zeppelin的高级feature。

https://static001.geekbang.org/infoq/79/79ed34782bdc0e2aa9ca2abd8c8be8d3.jpeg?x-oss-process=image/resize,w_416,h_234

PyFlink 社区扶持计划正式上线!

用户头像
Apache Flink 2020 年 4 月 29 日

简介: 作为 Dataflow 模型的最早采用者之一,Apache Flink 在流批一体特性的完成度上在开源项目中是十分领先的。本文将基于社区资料和笔者的经验,介绍 Flink 目前(1.10)流批一体的现状以及未来的发展规划。

https://static001.geekbang.org/infoq/9a/9a0b8d66fd661f394946b152f74d2c1e.png?x-oss-process=image/resize,w_416,h_234

实时即未来?一个小微企业心中的流计算

用户头像
Apache Flink 2020 年 6 月 18 日

简介: 本文由墨芷技术团队唐铎老师分享,主要讲述其技术团队内部引入流计算的整个过程,包括最初的决策、期间的取舍以及最终落地,一路走来他们的思考、感悟以及经验分享。 

https://static001.geekbang.org/infoq/5c/5ce7f0bedc8f2a7edf83b72f38c6c406.jpeg?x-oss-process=image/resize,w_416,h_234

Flink 的经典场景和业务故事有哪些?看看他们就知道了

用户头像
Apache Flink 2020 年 4 月 29 日

简介: 在大数据的日常场景中,从数据生产者,到数据收集、数据处理、数据应用(BI+AI),整个大数据 + AI 全栈的每个环节,Flink 均可应用于其中。

流计算_流计算资料文章-InfoQ写作平台