課程簡介
本課程主要講解Flink的核心設(shè)計(jì)原理,實(shí)時(shí)計(jì)算,SQL計(jì)算,離線計(jì)算功能和使用場景,同時(shí)通過實(shí)戰(zhàn)案例與實(shí)際業(yè)務(wù)的場景相結(jié)合,讓學(xué)員輕松掌握Flink在實(shí)時(shí)計(jì)算領(lǐng)域的獨(dú)特魅力。
本次課程的代碼實(shí)現(xiàn)以 Scala語言為主,配套有Java語言代碼實(shí)現(xiàn),要求學(xué)員至少具備Java基礎(chǔ),講師會提供培訓(xùn)過程中用到的項(xiàng)目代碼(Scala實(shí)現(xiàn)和Java實(shí)現(xiàn))。
目標(biāo)收益
通過實(shí)戰(zhàn)案例與實(shí)際業(yè)務(wù)的場景相結(jié)合,讓學(xué)員輕松掌握Flink在實(shí)時(shí)計(jì)算領(lǐng)域的獨(dú)特魅力。
培訓(xùn)對象
大數(shù)據(jù)開發(fā)工程師,對實(shí)時(shí)計(jì)算感興趣的人員
課程大綱
第一天上午:Flink快速理解&案例實(shí)戰(zhàn) |
Flink基本原理 Flink核心設(shè)計(jì)原理 Flink整體架構(gòu)分析 Flink API層面架構(gòu)分析 Flink使用場景分析 Flink集群部署方式分析 Flink實(shí)時(shí)計(jì)算案例實(shí)戰(zhàn) Flink離線計(jì)算案例實(shí)戰(zhàn) |
第一天下午:Flink常用功能分析 |
Flink Datastrema 常用算子分析 Flink Dataset常用算子分析 Flink中的高級功能之Broadcast Flink中的高級功能之Accumulators 和Counters Flink中的高級功能之Distributed Cache Flink中的state管理與恢復(fù)機(jī)制分析 |
第二天上午:Flink高級功能分析&案例實(shí)戰(zhàn) |
Flink中的window詳解 Flink中的Time詳細(xì)分析 Flink中的Parallel分析 Flink中的CEP功能分析 Flink中的數(shù)據(jù)亂序問題分析 Flink中的watermark機(jī)制介紹 Flink中watermark案例實(shí)戰(zhàn)【解決實(shí)時(shí)計(jì)算數(shù)據(jù)亂序問題】 |
第二天下午:Flink高級功能分析&項(xiàng)目實(shí)戰(zhàn) |
Flink中的SQL計(jì)算功能分析 Flink SQL計(jì)算平臺架構(gòu)分析 Flink SQL實(shí)現(xiàn)企業(yè)級數(shù)據(jù)流轉(zhuǎn)功能 項(xiàng)目實(shí)戰(zhàn) 項(xiàng)目重難點(diǎn)分析 項(xiàng)目優(yōu)化 |
第一天上午:Flink快速理解&案例實(shí)戰(zhàn) Flink基本原理 Flink核心設(shè)計(jì)原理 Flink整體架構(gòu)分析 Flink API層面架構(gòu)分析 Flink使用場景分析 Flink集群部署方式分析 Flink實(shí)時(shí)計(jì)算案例實(shí)戰(zhàn) Flink離線計(jì)算案例實(shí)戰(zhàn) |
第一天下午:Flink常用功能分析 Flink Datastrema 常用算子分析 Flink Dataset常用算子分析 Flink中的高級功能之Broadcast Flink中的高級功能之Accumulators 和Counters Flink中的高級功能之Distributed Cache Flink中的state管理與恢復(fù)機(jī)制分析 |
第二天上午:Flink高級功能分析&案例實(shí)戰(zhàn) Flink中的window詳解 Flink中的Time詳細(xì)分析 Flink中的Parallel分析 Flink中的CEP功能分析 Flink中的數(shù)據(jù)亂序問題分析 Flink中的watermark機(jī)制介紹 Flink中watermark案例實(shí)戰(zhàn)【解決實(shí)時(shí)計(jì)算數(shù)據(jù)亂序問題】 |
第二天下午:Flink高級功能分析&項(xiàng)目實(shí)戰(zhàn) Flink中的SQL計(jì)算功能分析 Flink SQL計(jì)算平臺架構(gòu)分析 Flink SQL實(shí)現(xiàn)企業(yè)級數(shù)據(jù)流轉(zhuǎn)功能 項(xiàng)目實(shí)戰(zhàn) 項(xiàng)目重難點(diǎn)分析 項(xiàng)目優(yōu)化 |