【崗位職責】 1、大數(shù)據平臺構建與智能升級:基于 Dataworks 搭建分布式數(shù)據平臺,負責數(shù)據集成、任務調度及全流程開發(fā),保障高效運行。結合 AI 技術優(yōu)化架構,引入智能調度算法提升資源利用率,推動平臺向智能化演進,支撐業(yè)務數(shù)據需求。; 2、數(shù)據架構設計與 AI 融合應用:主導數(shù)據架構規(guī)劃,制定存儲、處理及流通方案,確保與業(yè)務契合。運用 AI 技術優(yōu)化數(shù)據建模,通過機器學習算法提升 ETL 效率與數(shù)據質量,構建適配 AI 場景的數(shù)據支撐體系; 3、實時計算與技術創(chuàng)新:運用 Flink 實現(xiàn)海量數(shù)據離線與實時計算,解決數(shù)據傾斜等問題。關注 AI 與大數(shù)據融合技術,評估并落地智能計算框架,優(yōu)化集群性能,降低成本,驅動技術創(chuàng)新。 【任職要求】 1、專業(yè)背景與經驗:5 年以上大數(shù)據工作經驗,本科及以上學歷,相關專業(yè)優(yōu)先;熟悉 Dataworks 平臺,具備大數(shù)據項目開發(fā)經驗,有 AI 輔助數(shù)據處理或智能數(shù)據平臺搭建經驗者優(yōu)先。; 2、技術能力:精通數(shù)據倉庫建模與 ETL,深入理解 Flink 原理,能開發(fā)優(yōu)化計算任務;掌握 AI 基礎算法,了解機器學習在數(shù)據處理中的應用,可利用 AI 工具提升數(shù)據處理效能。; 3、綜合素養(yǎng):具備良好溝通與團隊協(xié)作能力,邏輯清晰,問題解決能力強;有較強自驅力與學習能力,能快速掌握 AI 與大數(shù)據融合新技術,適應新環(huán)境與業(yè)務需求。