1、參與數(shù)據(jù)開發(fā)規(guī)范和流程設(shè)計,獨(dú)立完成從數(shù)據(jù)采集到數(shù)據(jù)應(yīng)用需求的規(guī)劃設(shè)計。針對公司各業(yè)務(wù)系統(tǒng),設(shè)計數(shù)據(jù)集成解決方案,開發(fā)和實施ETL、ELT流程。
2、負(fù)責(zé)離線和實時數(shù)據(jù)倉庫的整體架構(gòu)設(shè)計。根據(jù)業(yè)務(wù)流程進(jìn)行數(shù)倉的分層和數(shù)據(jù)建模。
3、設(shè)計靈活的數(shù)據(jù)質(zhì)量方案,監(jiān)控和維護(hù)數(shù)據(jù)倉庫中的數(shù)據(jù)質(zhì)量,制定和實施數(shù)據(jù)驗證流程。
4、建立統(tǒng)一的數(shù)據(jù)入湖標(biāo)準(zhǔn),業(yè)務(wù)系統(tǒng)源數(shù)據(jù)按照數(shù)據(jù)入湖標(biāo)準(zhǔn)增量集成到數(shù)據(jù)倉庫。
5、規(guī)劃數(shù)據(jù)集市表空間、表分區(qū)、索引設(shè)計等提高執(zhí)行效率的優(yōu)化方案,保障數(shù)據(jù)應(yīng)用任務(wù)準(zhǔn)時高效執(zhí)行。
1、教育背景:計算機(jī)科學(xué)、信息技術(shù)、軟件工程或相關(guān)專業(yè)本科及以上學(xué)歷。
2、工作經(jīng)驗:
1)至少9年以上工作經(jīng)驗,其中至少3年以上數(shù)據(jù)開發(fā)工作經(jīng)驗,大型制造業(yè)數(shù)據(jù)治理經(jīng)驗優(yōu)先。
3、技能要求:
1) 具有較強(qiáng)的數(shù)據(jù)開發(fā)能力,能夠獨(dú)立完成數(shù)據(jù)應(yīng)用需求的開發(fā)工作;熟悉數(shù)據(jù)倉庫維度建模,能夠根據(jù)星型模型、雪花模型標(biāo)準(zhǔn)設(shè)計通用性高、耦合性低的數(shù)據(jù)模型。
2) 熟悉主流的數(shù)據(jù)庫特性和原理,包括但不限于Oracle、Mysql、Postgresql、Doris等;
3) 了解主流大數(shù)據(jù)技術(shù)和組件,包括不限于Hadoop、Spark、Hive、Doris、Flink、ES等;
4) 具有較強(qiáng)的數(shù)據(jù)建模和數(shù)據(jù)分析能力;
5) 較強(qiáng)的邏輯思維能力和問題解決能力,能夠快速響應(yīng)業(yè)務(wù)需求,提出創(chuàng)新性的解決方案。
4、對汽車行業(yè)或大型制造業(yè)的業(yè)務(wù)有一定的了解者優(yōu)先。