崗位職責:
根據(jù)現(xiàn)有及規(guī)劃中的數(shù)據(jù)運營業(yè)務,設計數(shù)據(jù)運營管理平臺,主要是鑒權、授權管理、計數(shù)管理、接口管理,日常對外的對接調試管理等內容。負責數(shù)據(jù)運營平臺的設計,并推動開發(fā)落地。
崗位要求:
1、掌握mysql、oracle、postgresql等一種或多種數(shù)據(jù)庫,會編寫函數(shù)、存儲過程,能進行數(shù)據(jù)庫查詢性能調優(yōu)和常見問題處理;
2、熟悉常用etl工具,如datastage、kettle、datax,能使用工具進行數(shù)據(jù)的處理;
3、熟悉大數(shù)據(jù)相關技術,對hadoop(hdfs/mapreduce/hive/hbase)生態(tài)有所了解,了解常用數(shù)據(jù)接入組件datax、sqoop、flumen等一種或多種;
4、掌握一種或多種計算框架和消息隊列:spark、flink、kafka等;
5、掌握greenplum、doris等一種或多種olap數(shù)據(jù)庫,進行相關模型的設計和數(shù)據(jù)管理;掌握python、java、scala等一種或多種編程語言;熟悉數(shù)據(jù)需求分析、數(shù)據(jù)探查、數(shù)據(jù)模型設計、元數(shù)據(jù)管理、數(shù)據(jù)標準管理、數(shù)據(jù)質量管理等理論方法,會使用工具(powerdesigne、pdmaner)進行數(shù)據(jù)模型設計和關系圖梳理;
6、具有多個數(shù)據(jù)倉庫開發(fā)項目經(jīng)驗,熟悉數(shù)據(jù)分析展示工具,具有實際數(shù)據(jù)可視化開發(fā)項目經(jīng)驗;
7、具備團隊協(xié)作和溝通能力,能夠與其他成員溝通協(xié)作,共同推進數(shù)據(jù)工程項目;