Flink 的经典场景和业务故事有哪些？看看他们就知道了

关注
发布于: 2020 年 04 月 29 日
简介： 在大数据的日常场景中，从数据生产者，到数据收集、数据处理、数据应用（BI+AI），整个大数据 + AI 全栈的每个环节，Flink 均可应用于其中。作为新一代开源大数据计算引擎，Flink 不仅满足了工业界对实时性的需求，还能够打通端到端的数据价值挖掘全链路。
在大数据的日常场景中，从数据生产者，到数据收集、数据处理、数据应用（BI+AI），整个大数据 + AI 全栈的每个环节，Flink 均可应用于其中。作为新一代开源大数据计算引擎，Flink 不仅满足了工业界对实时性的需求，还能够打通端到端的数据价值挖掘全链路。
如今，Flink 在大数据各个环节的应用几何？究竟能带来怎样重大的价值？未来，Flink 还会朝着哪些方面进化？
﻿
4月25-26日，全球首个 Apache 顶级项目在线会议 Flink Forward 中文精华版将正式开播，聚焦 Alibaba、 Google、AWS、Uber、Netflix、DellEMC、微博、滴滴等各大互联网公司实时计算的经典场景和业务故事，以超强阵容、优质议题普惠全球开发者！精华版内容均为中文，由 Flink 核心贡献者们对原版英文 talk 进行翻译和解说，您可免费在线观看。
大会亮点：
全程中文详细解说，多位 Flink PMC、Committer、一线技术专家等重量级嘉宾对 18 个优质 talk 进行中文解说，让您理解更清晰、透彻。
多角度了解 Flink 最新动向，大会内容从技术深度、社区生态、未来发展等方面扩展，与您分享 Flink 长期规划的 Roadmap。
丰富的国内外一线企业经典场景与业务故事，生产环境的宝贵实战经验分享。
多种 Flink 周边礼品，参与直播互动即可赢取社区周边大礼包。
此前，小松鼠已详细介绍了4月25日上午北京场、下午杭州场的直播议程，以下将分享4月26日上海场有哪些值得期待的内容。
4/26，上海场直播看什么
圆桌 | Keynote: Stream analytics made real with Pravega and Apache Flink
随着流式应用程序的发展，其支持系统也不断更新迭代。当今的应用程序不再是孤岛，而都是生态系统的一部分。因此市场对于流系统和平台提供的功能期望比以往更加严格。考虑到这些要求，我们设计并构建了 Pravega。
Pravega 是以流作为核心的原生流存储系统。Pravega 能够支持应用程序通过灵活且一致的方式注入和存储无限的数据流。将 Pravega 与 Apache Flink 相结合，我们可以构建数据流水线去同时跟踪和处理历史和实时数据，并且满足端到端的 exactly-once 语义。Pravega 和 Apache Flink 已成为 Dell Technologies 的 Streaming Data Platform 产品重要组成部分。本次演讲我们将和大家分享相关实践经验，包括实时视频流分析，自动驾驶的真实用例。
分享嘉宾：Srikanth Satya，Dell Technologies Vice President，Engineering。
解说嘉宾：滕昱，戴尔科技集团软件开发总监。
圆桌 | Google: 机器学习工作流的分布式处理
生产环境下机器学习流程通常需要非常大的计算和系统资源，需要在集群上进行分布式处理。本地或基于云基础架构的成本需要最大程度地高效利用资源，这使得诸如 Apache Flink 之类的分布式处理管道框架非常适合机器学习的工作流。
与此同时，生产环境下机器学习还必须解决现代软件方法论问题以及一些特有问题；不同类型的机器学习有不同的要求，通常是由不同的数据生命周期和事实来源驱动；实现常常遭受模块化，可伸缩性和可扩展性的限制。本次演讲中，我们会讨论生产环境下机器学习的应用程序，并回顾TensorFlow Extended（TFX），Flink，Apache Beam 和 Google 在生产中使用机器学习的经验。
分享嘉宾：
Ahmet Altay，Google 高级软件工程师，Apache Beam PMC。
Reza Rokni，Google Cloud Dataflow 和 Apache Beam 的开发倡导者。
Robert Crowe，Google 数据科学家和 TensorFlow 爱好者。
解说嘉宾：秦江杰，Apache Flink PMC，阿里巴巴高级技术专家。
圆桌 | AWS: 如何在全托管 Apache Flink 服务中提供应用高可用
AWS 为客户提供了一个完全托管的服务，用于运行 Apache Flink 应用程序 Amazon kinisis Data Analytics。在为客户提供服务的过程中，我们也面临着独特的挑战。其中一个挑战就是问题归属。如何确定运行时错误是由客户代码中的错误引起的，还是由底层基础结构的问题引起的？
在本次演讲中，我们将描述如何自动分类错误，以及如何通过编程或手动干预来恢复应用程序可用性。这对于我们确保 AWS 服务所期望的应用程序的可用性以及维护可持续的操作是至关重要的。我们还将回顾如何设计改进 Apache Flink 引擎以消除歧义，以及如何确保 Apache Flink 应用程序的高可用性。
分享嘉宾：
Ryan Nienhuis，AWS 开发工程师。
Tirtha Chatterjee，AWS 开发工程师。
解说嘉宾：章剑锋（简锋），Apache Member，阿里巴巴高级技术专家。
演讲 | Production-Ready Flink and Hive Integration - what story you can tell now?
本次演讲主要分享 Flink 1.10 中发布的完整 Flink-Hive 集成。将介绍一些常见的用例，其中 Flink 用户需要读写 Hive 数据以及引用 Hive UDF 的功能。为了说明用户如何轻松解决这些问题，我将通过示例详细介绍 Flink-Hive 集成。与会者将能够学习：
如何在 Flink 中本地读取和写入 Hive 数据（表，视图，分区）
Flink 支持的语法和 SQL 命令
Flink 集成到 Hive 上的优化
如何在 Flink中 重用 Hive UDF
分享嘉宾：李博闻，阿里巴巴技术专家。
解说嘉宾：李锐（天离），Apache HBase PMC，阿里巴巴技术专家
Flink Forward 全球在线会议中文精华版
最佳观看方式
本次直播将在 Flink Forward 中文版大会官网进行，点击「阅读原文」或复制下方官网链接了解更多详情，注册登陆后即可预约直播观看。届时，社区将提前以短信通知的形式提醒大家参与。
大会官网直播预约：
https://developer.aliyun.com/live/2594?spm=a2c6h.14242504.J_6074706160.2.3fca361fwj9lT3
﻿
预约成功后显示如下：
﻿
Tips：社区已准备丰富的周边礼品，参与直播互动、提问即可领取，还有惊喜抽奖环节哦～
完整版议程
Flink Forward 全球直播精华版共分为 Keynote 重点议题、Flink 最佳实践、深度技术应用、社区生态四部分，形式上由北京、上海、杭州三地轮流直播，在这里您将通过多样化场景的实践案例了解 Flink 核心优势及未来发展。
■ 直播时间：4月25-26日
■ 分享嘉宾：
Apache Member、Flink PMC
Apache Flink 核心贡献者
大厂一线技术专家
■ 详细议程：
https://developer.aliyun.com/live/2594 (二维码自动识别)
﻿
（最终议题以实际为准）
4月25-26日，锁定 Flink Forward 全球直播中文精华版！了解更多大会详情，可钉钉扫描下方二维码进群咨询～
﻿
如果您对大会实时英文直播感兴趣，点击下方链接可了解 Flink Forward Virtual Conference 2020 大会完整版议程详情及注册预约！
https://www.flink-forward.org/sf-2020/conference-program
机器学习/深度学习 SQL 自动驾驶 大数据 测试技术 TensorFlow Apache 算法框架/工具 HIVE 流计算
版权声明：本文中所有内容均属于阿里云开发者社区所有，任何媒体、网站或个人未经阿里云开发者社区协议授权不得转载、链接、转贴或以其他方式复制发布/发表。申请授权请邮件developerteam@list.alibaba-inc.com，已获得阿里云开发者社区协议授权的媒体、网站，在转载使用时必须注明"稿件来源：阿里云开发者社区，原文作者姓名"，违者本社区将依法追究责任。 如果您发现本社区中有涉嫌抄袭的内容，欢迎发送邮件至：developer2020@service.aliyun.com 进行举报，并提供相关证据，一经查实，本社区将立刻删除涉嫌侵权内容。
﻿