Doris實時數(shù)倉架構(gòu)與應(yīng)用實戰(zhàn)培訓(xùn)課程
-
-
培訓(xùn)對象: 數(shù)據(jù)倉庫工程師、實時數(shù)倉開發(fā)者、大數(shù)據(jù)平臺架構(gòu)師、數(shù)據(jù)分析工程師。
-
-
培訓(xùn)目標:
-
-
培訓(xùn)內(nèi)容介紹:
-
一、 Doris架構(gòu)與設(shè)計理念: 了解Doris的MPP(大規(guī)模并行處理)架構(gòu),對比與ClickHouse、Druid的差異。
二、 Doris安裝部署: 單節(jié)點快速部署,配置FE和BE節(jié)點,了解集群擴縮容操作。
三、 數(shù)據(jù)模型深入: 對比Duplicate Key、Unique Key、Aggregate Key三種數(shù)據(jù)模型的適用場景。
四、 表結(jié)構(gòu)設(shè)計與分區(qū): 設(shè)計分區(qū)分桶策略,選擇合適的分區(qū)字段和分桶字段,優(yōu)化數(shù)據(jù)分布。
五、 數(shù)據(jù)導(dǎo)入方式: 使用Stream Load進行實時導(dǎo)入,Broker Load批量導(dǎo)入HDFS/S3數(shù)據(jù),Routine Load消費Kafka。
六、 實時數(shù)據(jù)更新: 使用Unique模型實現(xiàn)數(shù)據(jù)更新,了解標記刪除和合并策略。
七、 Doris SQL查詢: 掌握標準SQL查詢語法,使用窗口函數(shù)進行復(fù)雜分析。
八、 物化視圖與預(yù)聚合: 創(chuàng)建物化視圖自動維護預(yù)計算結(jié)果,加速常用查詢。
九、 Rollup表與查詢改寫: 創(chuàng)建Rollup調(diào)整維度順序,理解查詢自動改寫匹配最優(yōu)Rollup。
十、 Colocation Join優(yōu)化: 使用Colocation Join避免數(shù)據(jù)Shuffle,提升多表Join性能。
十一、 查詢分析與優(yōu)化: 分析Profile信息,識別查詢瓶頸,調(diào)整Join順序和并行度。
十二、 實戰(zhàn)項目:實時數(shù)倉構(gòu)建: 基于Doris構(gòu)建實時數(shù)據(jù)倉庫,實現(xiàn)從數(shù)據(jù)接入、模型設(shè)計到報表展示的全流程。
如果您想學(xué)習(xí)本課程,請
預(yù)約報名
如果沒找到合適的課程或有特殊培訓(xùn)需求,請
訂制培訓(xùn)
除培訓(xùn)外,同時提供相關(guān)技術(shù)咨詢與技術(shù)支持服務(wù),有需求請發(fā)需求表到郵箱soft@info-soft.cn,或致電4007991916
技術(shù)服務(wù)需求表點擊在線申請
服務(wù)特點:
海量專家資源,精準匹配相關(guān)行業(yè),相關(guān)項目專家,針對實際需求,顧問式咨詢,互動式授課,案例教學(xué),小班授課,實際項目演示,快捷高效,省時省力省錢。
專家力量:
中國科學(xué)院軟件研究所,計算研究所高級研究人員
oracle,微軟,vmware,MSC,Ansys,candence,Altium,達索等大型公司高級工程師,項目經(jīng)理,技術(shù)支持專家
中科信軟培訓(xùn)中心,資深專家或講師
大多名牌大學(xué),碩士以上學(xué)歷,相關(guān)技術(shù)專業(yè),理論素養(yǎng)豐富
多年實際項目經(jīng)歷,大型項目實戰(zhàn)案例,熱情,樂于技術(shù)分享
針對客戶實際需求,案例教學(xué),互動式溝通,學(xué)有所獲