国产精品又长又粗又爽又黄的毛片, 国产AV无码专区亚洲AV毛片搜, 丰满人妻被猛烈进入中文字幕四川, 国产精品一区二区三区国产女人喷,亚洲国产欧美日韩图片在线人,潘娇娇337p人艺体艺术,成人免费无码大片a毛片古装,一本到高清视频免费,人妻在线视频免费看

更新于 8月19日

大數(shù)據(jù)開(kāi)發(fā)工程師

8000-12000元
  • 銀川金鳳區(qū)
  • 1-3年
  • 本科
  • 全職
  • 招1人

職位描述

Java大數(shù)據(jù)開(kāi)發(fā)
一.職業(yè)詳情
1、根據(jù)公司數(shù)據(jù)資產(chǎn)化與智能化應(yīng)用需求,通過(guò)構(gòu)建高可用數(shù)據(jù)基礎(chǔ)設(shè)施、保障數(shù)據(jù)鏈路高效穩(wěn)定運(yùn)行、落地?cái)?shù)據(jù)治理標(biāo)準(zhǔn),達(dá)到支撐企業(yè)數(shù)據(jù)價(jià)值釋放、賦能業(yè)務(wù)決策的核心目標(biāo);
2、組織/計(jì)劃:根據(jù)業(yè)務(wù)需求與技術(shù)發(fā)展趨勢(shì),設(shè)計(jì)數(shù)據(jù)倉(cāng)庫(kù)、實(shí)時(shí)數(shù)倉(cāng)、數(shù)據(jù)湖的架構(gòu)演進(jìn)路線圖(如分層模型設(shè)計(jì)、計(jì)算資源分配);制定ETL開(kāi)發(fā)規(guī)范、數(shù)據(jù)建模標(biāo)準(zhǔn)(如維度建模)、代碼版本管理規(guī)則等,評(píng)估數(shù)據(jù)計(jì)算與存儲(chǔ)資源需求(如
Hadoop集群容量),協(xié)調(diào)基礎(chǔ)設(shè)施團(tuán)隊(duì)規(guī)劃資源擴(kuò)容或優(yōu)化方案;
3、執(zhí)行:完成數(shù)據(jù)采集、清洗、轉(zhuǎn)換、加載(ETL/ELT)全流程開(kāi)發(fā),保障數(shù)據(jù)鏈路高效穩(wěn)定;基于業(yè)務(wù)場(chǎng)景設(shè)計(jì)數(shù)據(jù)表結(jié)構(gòu)(如用戶行為事件表、訂單事實(shí)表),編寫(xiě)SQL/Python代碼實(shí)現(xiàn)邏輯;開(kāi)發(fā)數(shù)據(jù)API、數(shù)據(jù)訂閱服務(wù)、報(bào)表底層數(shù)據(jù)集,支持業(yè)務(wù)端數(shù)據(jù)調(diào)用需求;定位并修復(fù)數(shù)據(jù)鏈路異常(如數(shù)據(jù)延遲、計(jì)算任務(wù)失?。?,保障數(shù)據(jù)產(chǎn)出時(shí)效性;
4、協(xié)助配合:配合數(shù)據(jù)產(chǎn)品經(jīng)理、數(shù)據(jù)分析師理解數(shù)據(jù)需求邏輯(如復(fù)雜業(yè)務(wù)指標(biāo)拆解),提供技術(shù)可行性評(píng)估;協(xié)助數(shù)據(jù)團(tuán)隊(duì)落地?cái)?shù)據(jù)質(zhì)量監(jiān)控規(guī)則、數(shù)據(jù)管理工具部署;
5、審核/審批:審核ETL腳本邏輯合理性、代碼性能,確保開(kāi)發(fā)質(zhì)量;審核數(shù)據(jù)血緣映射關(guān)系、數(shù)據(jù)一致性校驗(yàn)規(guī)則,避免臟數(shù)據(jù)進(jìn)入下游;審批數(shù)據(jù)表、API接口的訪問(wèn)權(quán)限申請(qǐng);
6、分析改進(jìn):通過(guò)日志分析、資源監(jiān)控,優(yōu)化數(shù)據(jù)計(jì)算效率;基于故障分析,改進(jìn)數(shù)據(jù)管道容錯(cuò)機(jī)制;評(píng)估新技術(shù)工具的適用性,推動(dòng)技術(shù)棧升級(jí);
二.任職要求
1.本科及以上學(xué)歷,數(shù)據(jù)科學(xué)或計(jì)算機(jī)相關(guān)專業(yè),一年以上經(jīng)驗(yàn);
2.熟練掌握 Java、Python 等一種及以上編程語(yǔ)言,有編程實(shí)踐經(jīng)驗(yàn);
3.熟悉關(guān)系型數(shù)據(jù)庫(kù)(如:MySQL、Oracle、SqlServer)、非關(guān)系型數(shù)據(jù)庫(kù)(如:MongoDB、Redis)及分布式數(shù)據(jù)庫(kù)(如:Doris)的原理與優(yōu)
4.熟悉 Flink、Kafka、Hadoop、Spark、Hive、MapReduce、HBase 等大數(shù)據(jù)技術(shù)棧,并了解其工作原理和應(yīng)用場(chǎng)景;
5.掌握 ETL/ELT 流程設(shè)計(jì),使用工具實(shí)現(xiàn)數(shù)據(jù)從數(shù)據(jù)源到數(shù)據(jù)倉(cāng)庫(kù)的抽取、加載和轉(zhuǎn)換,例如:
ETLCloud, Kettle (Pentaho) , Airflow,
Apache NiFi、DolphinScheduler 等;
6.理解數(shù)據(jù)倉(cāng)庫(kù)理論(如 Inmon、Kimball 建模方法),能設(shè)計(jì)分層數(shù)據(jù)倉(cāng)庫(kù)(ODS/DWD/DWS/ADS),優(yōu)化數(shù)據(jù)模型以提升查詢效率;
7.掌握數(shù)據(jù)鏈路監(jiān)控工具,能快速定位并修復(fù)數(shù)據(jù)延遲、任務(wù)失敗等生產(chǎn)問(wèn)題;熟悉數(shù)據(jù)質(zhì)量保障方法(如數(shù)據(jù)一致性校驗(yàn)、血緣追溯),確保數(shù)據(jù)輸出的準(zhǔn)確性與可靠性;
8.嚴(yán)謹(jǐn)、細(xì)密和工作態(tài)度和工作風(fēng)格,良好的團(tuán)隊(duì)合作精神,較強(qiáng)的內(nèi)部及外部溝通能力,能夠承受較大的工作壓力;
9.有廠商大數(shù)據(jù)認(rèn)證優(yōu)先;

工作地點(diǎn)

金鳳區(qū)銀川iBi育成中心(南1門(mén))

職位發(fā)布者

靳女士/交付經(jīng)理

剛剛活躍
立即溝通
公司Logo江蘇藍(lán)泰信息科技有限公司
江蘇藍(lán)泰信息科技有限公司(簡(jiǎn)稱江蘇藍(lán)泰),2020年成立于江蘇省南京市,注冊(cè)資金壹仟肆佰玖拾萬(wàn)元。江蘇藍(lán)泰致力于信息科技領(lǐng)域的業(yè)務(wù)開(kāi)發(fā)和拓展,主要提供各類軟件系統(tǒng)的開(kāi)發(fā)和運(yùn)維;物聯(lián)網(wǎng)技術(shù)研發(fā)和服務(wù);人工智能軟件開(kāi)發(fā)和應(yīng)用等。
公司主頁(yè)