SQL能力強：有比較多的SQL編寫項目經(jīng)驗
具備DolphinScheduler、doris經(jīng)驗，etl工具比較深入，遇到問題能排查的
實時數(shù)據(jù)：flinkCDC實操經(jīng)驗
負責銜接業(yè)務系統(tǒng)與中臺系統(tǒng)的數(shù)倉建設(shè)。需具備將數(shù)倉理論落地中臺的能力，嚴格遵循數(shù)據(jù)治理標準實施交付，同時掌握大數(shù)據(jù)量處理的理論與實操經(jīng)驗，推動企業(yè)數(shù)據(jù)價值挖掘與數(shù)據(jù)服務能力升級。
主要職責
（一）數(shù)據(jù)平臺架構(gòu)與運維
參與數(shù)據(jù)平臺架構(gòu)設(shè)計與搭建，運用 Flink、Flink CDC、Doris 等技術(shù)實現(xiàn)平臺高性能部署；
負責平臺日常運維，優(yōu)化數(shù)據(jù)處理流程，保障 7×24 小時數(shù)據(jù)服務可用性；
主導大數(shù)據(jù)技術(shù)棧（Hadoop/Spark 生態(tài)）與MPP數(shù)據(jù)庫的集成方案設(shè)計；
（二）數(shù)倉體系建設(shè)
基于Inmon/CIF理論設(shè)計數(shù)倉分層架構(gòu)（ODS/DWD/DWS/ADS），制定數(shù)據(jù)流向規(guī)范；
運用星型 / 雪花模型完成維度建模，處理緩慢變化維、事實表粒度設(shè)計等復雜場景；
主導ETL全流程開發(fā)，優(yōu)化數(shù)據(jù)清洗、轉(zhuǎn)換規(guī)則，實現(xiàn)跨系統(tǒng)數(shù)據(jù)標準化整合；
（三）數(shù)據(jù)處理與價值挖掘
編寫復雜 SQL 腳本完成 PB 級數(shù)據(jù)清洗、聚合與多維分析，支撐業(yè)務決策報表；
設(shè)計實時數(shù)據(jù)鏈路（Kafka+Flink），實現(xiàn)業(yè)務指標秒級更新與異常預警；
基于 Doris/StarRocks 構(gòu)建高速查詢引擎，優(yōu)化查詢響應時間至毫秒級；
（四）數(shù)據(jù)治理與質(zhì)量管控
建立數(shù)據(jù)質(zhì)量監(jiān)控體系，制定完整性 / 一致性 / 及時性等評估指標；
主導數(shù)據(jù)安全策略落地，實現(xiàn)敏感數(shù)據(jù)脫敏、訪問權(quán)限細粒度管控；
編寫數(shù)據(jù)字典與血緣關(guān)系文檔，推動數(shù)據(jù)資產(chǎn)可視化管理；
任職要求
（一）教育背景
? 計算機科學、數(shù)據(jù)科學等相關(guān)專業(yè)本科及以上學歷
（二）核心經(jīng)驗
? 5 年以上數(shù)據(jù)開發(fā)經(jīng)驗，3 年以上數(shù)倉建設(shè)主導經(jīng)驗
? 具備電商 / 金融 / 互聯(lián)網(wǎng)等行業(yè)大型數(shù)倉項目落地案例
? 主導過 100 + 維度表、50 + 事實表的模型設(shè)計與優(yōu)化
具體要求
編程語言：精通 Python/Java/Scala 其中 2 門，具備分布式程序調(diào)優(yōu)能力
SQL 能力：掌握窗口函數(shù) / CTE / 執(zhí)行計劃分析，能優(yōu)化百萬級 QPS 查詢
數(shù)倉建模：熟悉維度建模、三范式設(shè)計，能處理星座模型等復雜場景
實時計算：精通 Flink 流處理 API，實現(xiàn)端到端 Exactly-Once 語義
MPP 數(shù)據(jù)庫：掌握 Doris/StarRocks 向量化執(zhí)行原理，能調(diào)優(yōu)高并發(fā)查詢
數(shù)據(jù)治理：熟悉 DCAM 數(shù)據(jù)治理框架，有元數(shù)據(jù)管理平臺搭建經(jīng)驗