1. 核心數(shù)據(jù)開發(fā):負(fù)責(zé)大規(guī)模數(shù)據(jù) ETL/ELT 流程的設(shè)計(jì)、開發(fā)與運(yùn)維,保障數(shù)據(jù)加工任務(wù)的高效、穩(wěn)定與準(zhǔn)確。
2. 數(shù)據(jù)模型與資產(chǎn)建設(shè):參與數(shù)據(jù)倉庫、數(shù)據(jù)湖以及湖倉一體架構(gòu)的構(gòu)建;負(fù)責(zé)主題域數(shù)據(jù)模型的設(shè)計(jì)、開發(fā)與優(yōu)化,將數(shù)據(jù)轉(zhuǎn)化為易用、規(guī)范的數(shù)據(jù)資產(chǎn)。
3. 數(shù)據(jù)服務(wù)與 API 開發(fā):將清洗加工后的數(shù)據(jù),通過數(shù)據(jù)服務(wù)、API 接口等方式,提供給下游業(yè)務(wù)系統(tǒng)、數(shù)據(jù)產(chǎn)品和分析師使用,實(shí)現(xiàn)數(shù)據(jù)價(jià)值的便捷交付。
4. 數(shù)據(jù)平臺(tái)與工具建設(shè):參與公司數(shù)據(jù)中臺(tái)基礎(chǔ)平臺(tái)和工具鏈的建設(shè)與優(yōu)化(如任務(wù)調(diào)度、數(shù)據(jù)質(zhì)量、元數(shù)據(jù)管理等),提升數(shù)據(jù)開發(fā)的效率與規(guī)范性。
5. 數(shù)據(jù)質(zhì)量管理:建立并監(jiān)控?cái)?shù)據(jù)質(zhì)量指標(biāo)體系,及時(shí)發(fā)現(xiàn)并解決數(shù)據(jù)問題,參與數(shù)據(jù)治理流程,保障數(shù)據(jù)的準(zhǔn)確性、一致性和完整性。
6. 完成領(lǐng)導(dǎo)指派的各項(xiàng)工作,以確保團(tuán)隊(duì)目標(biāo)的順利達(dá)成。
1. 本科及以上學(xué)歷,計(jì)算機(jī)、數(shù)學(xué)、統(tǒng)計(jì)學(xué)或相關(guān)專業(yè)。
2. 1 年以上 ETL 開發(fā)經(jīng)驗(yàn),熟悉 SQL 和至少一種 ETL 工具。
3. 熟悉數(shù)據(jù)庫技術(shù)(如 MySQL、Oracle、PostgreSQL 等),了解數(shù)據(jù)倉庫和 Hadoop生態(tài),了解 Spark、Flink 等分布式計(jì)算框架。
4. 具備基本的編程能力,熟悉 Python、Shell 等腳本語言者優(yōu)先。
5. 良好的邏輯思維能力和問題解決能力,對(duì)數(shù)據(jù)敏感,有 AI+數(shù)據(jù)經(jīng)驗(yàn)者優(yōu)先。6. 具備團(tuán)隊(duì)合作精神,良好的溝通能力和學(xué)習(xí)能力。
7. 具備央國企數(shù)據(jù)項(xiàng)目經(jīng)驗(yàn)者優(yōu)先。