写点什么

尚硅谷数据湖 Iceberg 视频教程发布

作者:小谷哥
  • 2023-03-28
    北京
  • 本文字数:1085 字

    阅读完需:约 4 分钟

Iceberg 是 Netflix 开发的面向海量数据分析场景的数据组织形式,在众多数据湖技术中独树一帜,目前已晋升 Apache 顶级项目,是各大互联网公司的首选数据湖技术,腾讯即选择了 Iceberg 作为数据湖存储引擎。

本套教程由尚硅谷联合 Iceberg 开发团队共同推出。从 Iceberg 的技术特点和存储结构入手展开讲解,详细介绍了与大数据主流框架的集成与使用,包括 Hive、Spark SQL、Flink SQL、Flink DataStream,从简单的安装配置,到详细的日常操作,再到解决集成中的各种问题,实用更实战!

教程延续了尚硅谷一贯的风格:保姆式讲解,败家式赠送。课程由浅入深,从理论到实操涵盖全面,手把手教学,视频、代码、笔记、资料,一股脑全部送送送!



教程目录


01.Iceberg 教程简介

02.Iceberg 简介_概述

03.Iceberg 简介_特性

04.Iceberg 简介_其他数据湖框架的对比

05.Iceberg 存储结构_基本概念

06.Iceberg 存储结构_查询流程分析

07.Iceberg 与 Hive 集成_版本对应关系

08.Iceberg 与 Hive 集成_环境准备

09.Iceberg 与 HIve 集成_Catalog 说明

10.Iceberg 与 Hive 集成_使用默认 Catalog

11.Iceberg 与 Hive 集成_指定 Catalog 演示

12.Iceberg 与 Hive 集成_指定路径加载表

13.Iceberg 与 Hive 集成_创建表

14.Iceberg 与 Hive 集成_修改 &插入 &删除

15.Iceberg 与 SparkSQL 集成_环境准备

16.Iceberg 与 SparkSQL 集成_创建 Catalog

17.Iceberg 与 SparkSQL 集成 _创建分区表 &隐藏分区

18.Iceberg 与 SparkSQL 集成_使用 CTAS 和 REPLACE 建表

19.Iceberg 与 SparkSQL 集成_删除表

20.Iceberg 与 SparkSQL 集成_修改表

21.Iceberg 与 SparkSQL 集成_添加列

22.Iceberg 与 SparkSQL 集成_修改和删除列

23.Iceberg 与 SparkSQL 集成_修改分区

24.Iceberg 与 SparkSQL 集成_插入 MERGE INTO&查询元数据

25.Iceberg 与 SparkSQL 集成_存储过程调用

26.Iceberg 与 DF API 集成_环境准备

27.Iceberg 与 DF API 集成_读取表

28.Iceberg 与 DF API 集成_检查表

29.Iceberg 与 DF API 集成_写入表

30.Iceberg 与 DF API 集成_维护表 _获取 Table 对象

31.Iceberg 与 DF API 集成_维护表_快照过期清理

32.Iceberg 与 DF API 集成_维护表_清理无效文件 &合并小文件

33.Iceberg 与 FlinkSQL 集成_环境准备

34.Iceberg 与 FLinkSQL 集成_创建 Catalog

35.Iceberg 与 FlinkSQL 集成_建表及限制

36.Iceberg 与 FlinkSQL 集成_修改表和删除表

37.Iceberg 与 FlinkSQL 集成 _插入表 &upsert 问题分析

38.Iceberg 与 FlinkSQL 集成 _流式链路问题分析对比

39.Iceberg 与 FlinkSQL 集成_与 Flink 集成的不足

40.Iceberg 与 Flink DataStream 集成_环境准备

41.Iceberg 与 Flink DataStream 集成_读取数据

42.Iceberg 与 Flink DataStream 集成_FLIP-27 方式读取

43.Iceberg 与 Flink DataStream 集成写入数据

44.Iceberg 与 Flink DataStream 集成 _合并文件 &元数据管理 API

用户头像

小谷哥

关注

定期分享编程相关技术知识 2022-02-16 加入

【视频及配套资料下载】:www.atguigu.com 【在线学习交流】:关注尚硅谷B站官方账号

评论

发布
暂无评论
尚硅谷数据湖Iceberg视频教程发布_小谷哥_InfoQ写作社区