大数据开发之Apache Hudi数据湖基础到项目实战(视频+资料)

大数据开发之Apache Hudi数据湖基础到项目实战(视频+资料)

欢迎参加我们的Apache Hudi 数据湖管理与实战课程!本课程将带您深入了解 Apache Hudi 的基础概念和应用,通过视频教学和实战案例 ,让您轻松掌握 Hudi 的核心技术和应用方法 ,助您在大数据领域中游刃有余。
课程分为四个部分,首先从 Hudi 的基础入门开始,涵盖数据湖概念 、Hudi 框架介绍等内容;接着介绍 Hudi 在 Spark 和 Flink 中的集成应用 ,包括环境准备 、业务数据分析和指标查询等;最后通过实战案例展示 Hudi 在数据采集、流式分析和报表可视化中的应用,真实场景帮助学员理解并掌握 Hudi 的实际应用技能 。

课程目录:
从Apache Hudi基础到项目实战【课程导学】.mp4
<1.Hudi 基础入门篇视频>
00–Apache Hudi 课程内容提纲.mp4
01–Hudi 基础入门篇–课程内容大纲和学习目标.wmv
02–为什么要学习Apache Hudi–什么是数据湖DataLake.wmv
03–为什么要学习Apache Hudi–数据仓库和数据湖区别.wmv
04–为什么要学习Apache Hudi–三大流式数据湖框架.wmv
05–为什么要学习Apache Hudi–Hudi 框架基本介绍.wmv
06–为什么要学习Apache Hudi–Hudi 快速发展.wmv
07–Hudi 快速体验使用–编译Hudi 源码.wmv
08–Hudi 快速体验使用–大数据环境准备概述.wmv
09–Hudi 快速体验使用–HDFS 安装部署测试.wmv
10–Hudi 快速体验使用–Spark 安装部署测试.wmv
11–Hudi 快速体验使用–启动spark-shell添加jar包.wmv
12–Hudi 快速体验使用–模拟产生乘车Trip数据.wmv
13–Hudi 快速体验使用–保存数据到Hudi表.wmv
14–Hudi 快速体验使用–查询Hudi表数据.wmv
15–Hudi 快速体验使用–初识Hudi数据管理.wmv
16–基于IDEA编程使用Hudi–构建Maven模块环境.wmv
17–基于IDEA编程使用Hudi–模拟数据并插入Insert.wmv
18–基于IDEA编程使用Hudi–快照查询及日期时间过滤查询.wmv
19–基于IDEA编程使用Hudi–更新数据Update.wmv
20–基于IDEA编程使用Hudi–增量查询Incremental数据.wmv
21–基于IDEA编程使用Hudi–删除数据Delete.wmv
22–Apache Hudi 核心概念剖析–三大基本概念.wmv
23–Apache Hudi 核心概念剖析–数据计算三种模型.wmv
24–Apache Hudi 核心概念剖析–Hudi数据三种查询类型.wmv
25–Apache Hudi 核心概念剖析–COW 类型表.wmv
26–Apache Hudi 核心概念剖析–MOR 类型表.wmv
27–Apache Hudi 核心概念剖析–数据写操作流程.wmv
28–Hudi 基础入门篇–课程内容内容总结和作业.mp4

<2.Hudi 应用进阶篇(Spark 集成)视频>
01–Hudi 应用进阶篇之集成Spark–课程内容大纲和学习目标.wmv
02–大数据环境准备–离线tar安装MySQL 5.7.wmv
03–大数据环境准备–安装部署Hive.wmv
04–大数据环境准备–安装部署Zookeeper.wmv
05–大数据环境准备–安装部署Kafka.wmv
06–滴滴运营数据分析–业务数据调研和需求分析.wmv
07–滴滴运营数据分析–构建开发环境.wmv
08–滴滴运营数据分析–工具类SparkUtils.wmv
09–滴滴运营数据分析–日期转换星期测试.wmv
10–滴滴运营数据分析–业务数据加载存储–思路分析.wmv
11–滴滴运营数据分析–业务数据加载存储–加载CSV数据.wmv
12–滴滴运营数据分析–业务数据加载存储–数据ETL转换.wmv
13–滴滴运营数据分析–业务数据加载存储–保存Hudi表.wmv
14–滴滴运营数据分析–指标查询分析–加载Hudi表数据.wmv
15–滴滴运营数据分析–指标查询分析–订单类型统计.wmv
16–滴滴运营数据分析–指标查询分析–订单时效性统计.wmv
17–滴滴运营数据分析–指标查询分析–订单交通类型统计.wmv
18–滴滴运营数据分析–指标查询分析–订单价格区间统计.wmv
19–滴滴运营数据分析–指标查询分析–订单距离区间统计.wmv
20–滴滴运营数据分析–指标查询分析–订单星期统计.wmv
21–滴滴运营数据分析–集成Hive查询–创建表和添加分区.wmv
22–滴滴运营数据分析–集成Hive查询–编写SQL指标分析.wmv
23–结构化流写入Hudi–模拟交易订单数据和流程分析.wmv
24–结构化流写入Hudi–流式程序开发.wmv
25–结构化流写入Hudi–订单数据查询分析.wmv
26–结构化流写入Hudi–工具类DeltaStreamer.wmv
27–集成 SparkSQL–快速体验数据CRUD.wmv
28–集成 SparkSQL–创建表方式.wmv
29–集成 SparkSQL–MergeInto语句.wmv
30–Hudi 应用进阶篇之集成Spark–课程内容内容总结和作业.wmv

<3.Hudi 应用进阶篇(Flink 集成)视频>
01–Hudi 应用进阶篇之集成Flink–课程内容大纲和学习目标.wmv
02–快速入门使用–Flink Standalone 集群安装部署.wmv
03–快速入门使用–集成方式及启动SQL Client.wmv
04–快速入门使用–创建表及数据插入更新查询.wmv
05–快速入门使用–流式查询StreamingQuery.wmv
06–Flink SQL Writer–Flink SQL集成Kafka.wmv
07–Flink SQL Writer–构建Maven开发环境.wmv
08–Flink SQL Writer–采用Flink SQL编程加载Kafka数据.wmv
09–Flink SQL Writer–编程实现数据实时增量存储Hudi表.wmv
10–Flink SQL Writer–编程实现流式增量读取Hudi表数据.wmv
11–Flink SQL Client 写入Hudi–整体思路流程及环境配置.wmv
12–Flink SQL Client 写入Hudi–编写DDL和DML语句数据实时入湖Hudi.wmv
13–Flink CDC Hudi–CDC 概念和类型.wmv
14–Flink CDC Hudi–重新编译Hudi源码集成Flink与Hive.wmv
15–Flink CDC Hudi–开启MySQL binlog和创建表.wmv
16–Flink CDC Hudi–使用Flink CDC创建表及测试.wmv
17–Flink CDC Hudi–创建视图View存储中间数据.wmv
18–Flink CDC Hudi–插入视图数据插入Hudi表.wmv
19–Flink CDC Hudi–使用Hive查询Hudi表数据.wmv
20–Flink CDC Hudi–Hudi管理命令hudi-cli使用.wmv
21–Hudi 应用进阶篇之集成Flink–课程内容内容总结和作业.wmv

<4.传智教育博学谷Hudi案例实战视频>
01–传智教育博学谷Hudi案例实战–课程内容大纲和学习目标.wmv
02–实战案例技术架构–Flume+Kafka+StructuredStreaming+Hudi+Hive+MySQL.wmv
03–业务数据调研–运行程序实时产生社交数据.wmv
04–七陌数据采集–ApacheFlume是什么及运行机制.wmv
05–七陌数据采集–ApacheFlume安装部署及开发步骤.wmv
06–七陌数据采集–ApacheFlume入门案例.wmv
07–七陌数据采集–编写配置运行Agent实时采集数据至Kafka.wmv
08–实时存储七陌数据–创建模块及编写流式程序开发步骤.wmv
09–实时存储七陌数据–消费Kafka数据及转换处理.wmv
10–实时存储七陌数据–存储Hudi表及测试运行.wmv
11–集成Hive指标分析–创建Hive表和添加分区信息.wmv
12–集成Hive指标分析–编写SQL进行业务指标分析.wmv
13–SparkSQL 离线指标分析–业务指标需求分析和创建MySQL结果表.wmv
14–SparkSQL 离线指标分析–离线批量加载Hudi表数据.wmv
15–SparkSQL 离线指标分析–自定义UDF函数解析IP地址为省份.wmv
16–SparkSQL 离线指标分析–Hudi表数据选择字段和转换数据.wmv
17–SparkSQL 离线指标分析–编写SQL实现业务指标分析.wmv
18–SparkSQL 离线指标分析–指标结果保存MySQL表.wmv
19–FineBI 报表可视化–配置FineBI数据源和添加数据集.wmv
20–FineBI 报表可视化–创建仪表盘及添加总信息量.wmv
21–FineBI 报表可视化–开发柱形图展示发送信息量Top10用户.wmv
22–FineBI 报表可视化–开发饼图展示发送信息量Top10省份.wmv
23–FineBI 报表可视化–开发地图展示各省份信息量.wmv
24–传智教育博学谷Hudi案例实战–课程内容总结和作业.wmv

<5.传智教育数据中心Hudi案例实战>
01–传智教育数据中心Hudi案例实战–课程内容大纲和学习目标.mp4
02–实战案例技术架构–MySQL+FlinkCDC+Hudi+FlinkSQL+Presto+FineBI.wmv
03–业务数据调研–MySQL数据库初始化5张表业务数据.wmv
04–Flink CDC 实时数据采集–开启MySQL binlog及FlinkSQL开发步骤.wmv
05–Flink CDC 实时数据采集–开发环境准备(SQLClient和程序代码).wmv
06–Flink CDC 实时数据采集–基于CDC编写DDL和DML语句同步客户信息表数据.wmv
07–Flink CDC 实时数据采集–基于CDC编写DDL和DML语句同步其他业务表数据.wmv
08–Flink CDC 实时数据采集–验证CDC是否将数据同步Hudi表.wmv
09–Presto 即席查询Hudi–Presto功能架构及数据模型.wmv
10–Presto 即席查询Hudi–Presto 单机安装部署启动.wmv
11–Presto 即席查询Hudi–Hive创建表关联Hudi表.wmv
12–Presto 即席查询Hudi–Presto与Hudi集成配置.wmv
13–Presto 即席查询Hudi–编写SQL离线指标分析及保存MySQL.wmv
14–FlinkSQL 流式分析–业务需求说明和开发步骤流程.wmv
15–FlinkSQL 流式分析–MySQL数据库创建实时指标存储结果表.wmv
16–FlinkSQL 流式分析–流式查询Hudi表进行指标计算并存储MySQL.wmv
17–FineBI 报表可视化–开发不同图表展示实时和离线指标.wmv
18–传智教育数据中心Hudi案例实战–课程内容总结和作业.mp4