崗位職責:
1.根據(jù)數(shù)字化應用需求,制定ETL相關設計方案和開發(fā)計劃,并進行后續(xù)的設計、實施、維護;
2.負責數(shù)據(jù)湖數(shù)據(jù)模型的管理工作(建模,設計,實施);
3.負責數(shù)據(jù)源調(diào)研、入庫、開發(fā)的全流程工作,并保證數(shù)據(jù)質(zhì)量;
4.負責數(shù)據(jù)倉庫的模型的標準制定,實施,監(jiān)督工作;
5.負責數(shù)據(jù)抽取、清洗、轉(zhuǎn)化等數(shù)據(jù)處理程序開發(fā)。
任職要求:
1.3年以上大數(shù)據(jù)開發(fā)經(jīng)驗,計算機科學、軟件工程、數(shù)學、統(tǒng)計學等相關專業(yè);
2.具備扎實的編程基礎,熟練掌握 Java、Python、Scala 等至少一種編程語言;
3.熟悉大數(shù)據(jù)技術(shù)棧,包括 Hadoop、Spark、Hive、HBase、Kafka 等,有實際項目開發(fā)經(jīng)驗者優(yōu)先;
4.掌握數(shù)據(jù)倉庫設計和開發(fā)方法,熟悉 SQL 語言,有數(shù)據(jù)倉庫建設經(jīng)驗者優(yōu)先。