崗位1
初中級(jí)大數(shù)據(jù)開發(fā)工程師
互聯(lián)網(wǎng)&傳統(tǒng)數(shù)倉(cāng)技術(shù)棧背景
1.有數(shù)倉(cāng)建設(shè)、重構(gòu)、搬遷項(xiàng)目和方案設(shè)計(jì)經(jīng)驗(yàn)
2.有負(fù)載類型數(shù)倉(cāng)任務(wù)改造、改寫、任務(wù)轉(zhuǎn)換經(jīng)驗(yàn)
3.能夠遷移遷移需求編寫數(shù)據(jù)遷移腳本與3.流程(Hive/Spark/Python/SOL)，具備-定 python\shell 腳本開發(fā)能力
4.有百億數(shù)據(jù)體量搬遷和質(zhì)量保障經(jīng)驗(yàn)有以上經(jīng)驗(yàn)更優(yōu)，至少具備2點(diǎn)以上
有實(shí)時(shí)任務(wù)技術(shù)背景+經(jīng)驗(yàn)(1~2 名)
精通SQL+任意 1~2 編程語(yǔ)言 +實(shí)戰(zhàn)&調(diào)優(yōu)(會(huì)python等腳本語(yǔ)言加分)
崗位2
項(xiàng)目經(jīng)理
互聯(lián)網(wǎng)數(shù)倉(cāng)技術(shù)棧 + 項(xiàng)目管理
非純項(xiàng)目管理，技術(shù)背景能夠和甲方一起參與、深入具體方案設(shè)計(jì)、采集、問(wèn)題排查、分析和決策中
有數(shù)倉(cāng)建設(shè)、任務(wù)遷移工作經(jīng)驗(yàn)，包括數(shù)據(jù)抽取、轉(zhuǎn)換、結(jié)構(gòu)遷移、全量導(dǎo)入、增量同步與校驗(yàn)。
有百億數(shù)據(jù)體量、任務(wù)性能優(yōu)化和質(zhì)量保能夠構(gòu)建遷移過(guò)程的監(jiān)控、校驗(yàn)點(diǎn)和對(duì)賬機(jī)制，確保數(shù)據(jù)準(zhǔn)確性、一致性與完整性。
有5 年以上數(shù)據(jù)項(xiàng)目經(jīng)驗(yàn)，有推動(dòng)協(xié)調(diào)幾十人橫向項(xiàng)目落地經(jīng)驗(yàn)更優(yōu)
精通SQL+任意 1~2 編程語(yǔ)言 精通 Spark\FlinkHiive 等數(shù)據(jù)系統(tǒng)，架構(gòu)設(shè)計(jì)和特證經(jīng)驗(yàn)，熟悉其他軟件系統(tǒng)架構(gòu)
崗位3
互聯(lián)網(wǎng)數(shù)倉(cāng)技術(shù)棧背景
需能無(wú)需指導(dǎo)自主完成復(fù)雜問(wèn)題的解決和跟進(jìn)
能夠遷移遷移需求編寫數(shù)據(jù)遷移腳本與流程(Hive/Spark/Python/SQL)，具備定 python\shell 腳本開發(fā)能力有數(shù)倉(cāng)建設(shè)、重構(gòu)、搬遷項(xiàng)目和方案設(shè)計(jì)經(jīng)驗(yàn)
有負(fù)載類型數(shù)倉(cāng)任務(wù)改造、改寫、任務(wù)轉(zhuǎn)換經(jīng)驗(yàn)
有百億數(shù)據(jù)體是搬遷和質(zhì)是保障經(jīng)驗(yàn)
有實(shí)時(shí)任務(wù)技術(shù)背景+經(jīng)驗(yàn)(2~3 名)
精通SQL+任意 1~2 編程語(yǔ)言
熟悉Spark\Flink\Hiive 等數(shù)據(jù)系統(tǒng)，架構(gòu)設(shè)計(jì)和特點(diǎn)
了解其他軟件系統(tǒng)架構(gòu)