国产精品又长又粗又爽又黄的毛片, 国产AV无码专区亚洲AV毛片搜, 丰满人妻被猛烈进入中文字幕四川, 国产精品一区二区三区国产女人喷,亚洲国产欧美日韩图片在线人,潘娇娇337p人艺体艺术,成人免费无码大片a毛片古装,一本到高清视频免费,人妻在线视频免费看

更新于 8月11日

數(shù)倉(cāng)開(kāi)發(fā)工程師

1.2-1.5萬(wàn)
  • 深圳南山區(qū)
  • 1-3年
  • 本科
  • 全職
  • 招1人

職位描述

數(shù)倉(cāng)開(kāi)發(fā)PythonMySQLSpark非外包
崗位職責(zé)描述
1、ETL/ELT開(kāi)發(fā):
使用Python(Pandas、NumPy等)設(shè)計(jì)并實(shí)現(xiàn)高效的數(shù)據(jù)抽取、轉(zhuǎn)換和加載流程。
維護(hù)和優(yōu)化現(xiàn)有ETL任務(wù),確保數(shù)據(jù)處理的準(zhǔn)確性與時(shí)效性。
2、數(shù)據(jù)建模與存儲(chǔ):
參與數(shù)據(jù)倉(cāng)庫(kù)的星型/雪花模型設(shè)計(jì),構(gòu)建分層數(shù)倉(cāng)(ODS/DWD/DWS/ADS)。
3、數(shù)據(jù)質(zhì)量與監(jiān)控:
實(shí)現(xiàn)數(shù)據(jù)校驗(yàn)規(guī)則,監(jiān)控?cái)?shù)據(jù)質(zhì)量,編寫(xiě)自動(dòng)化測(cè)試腳本。
使用日志和告警工具(如Prometheus/ELK)跟蹤任務(wù)異常。
4、協(xié)作與支持:
與數(shù)據(jù)分析師、業(yè)務(wù)團(tuán)隊(duì)協(xié)作,理解需求并提供可用的數(shù)據(jù)模型。
編寫(xiě)技術(shù)文檔,清晰描述數(shù)據(jù)流、表結(jié)構(gòu)和ETL邏輯。
任職條件描述
1、編程與工具:
2年P(guān)ython開(kāi)發(fā)經(jīng)驗(yàn),熟練掌握 Pandas、SQLAlchemy、PySpark 等庫(kù)。
精通SQL,能編寫(xiě)復(fù)雜查詢(窗口函數(shù)、CTE、性能優(yōu)化)。
熟悉至少一種ETL調(diào)度工具(Apache Airflow/Luigi/Prefect)。
2、數(shù)據(jù)倉(cāng)庫(kù)技術(shù)棧:
理解數(shù)倉(cāng)分層設(shè)計(jì),熟悉 Kimball維度建模 或 Inmon范式建模。
使用過(guò)主流數(shù)據(jù)庫(kù)(Oracle/PostgreSQL/Mysql)或云數(shù)倉(cāng)。
3、數(shù)據(jù)處理與優(yōu)化:
具備數(shù)據(jù)清洗、去重、聚合等場(chǎng)景的實(shí)戰(zhàn)經(jīng)驗(yàn)。
能優(yōu)化大數(shù)據(jù)量下的Python/SQL性能(分區(qū)、索引、并行計(jì)算)。
4、運(yùn)維能力:
Linux基礎(chǔ)操作,能編寫(xiě)Shell腳本輔助任務(wù)。

工作地點(diǎn)

深圳南山區(qū)方大大廈12樓

職位發(fā)布者

李女士/人事

剛剛活躍
立即溝通
公司Logo深圳市前海數(shù)據(jù)服務(wù)有限公司
前海數(shù)據(jù)是領(lǐng)先的大數(shù)據(jù)分析和人工智能解決方案提供商,是國(guó)內(nèi)最早從事數(shù)據(jù)運(yùn)營(yíng)的企業(yè),專(zhuān)業(yè)從事數(shù)據(jù)的整合和分析應(yīng)用,幫助客戶挖掘數(shù)據(jù)價(jià)值,支持科學(xué)決策。公司由前海管理局2014年決定設(shè)立,陸續(xù)引進(jìn)多家投資機(jī)構(gòu),公司的初心使命是尊重商業(yè)隱私的前提下,促進(jìn)地區(qū)經(jīng)濟(jì)增長(zhǎng)和發(fā)展,客戶從政府經(jīng)濟(jì)部門(mén)拓展到企業(yè),公司經(jīng)營(yíng)團(tuán)隊(duì)深刻理解政府,對(duì)數(shù)據(jù)分析、情報(bào)和技術(shù)非常熟悉,并運(yùn)營(yíng)大量高價(jià)值的經(jīng)濟(jì)數(shù)據(jù),曾經(jīng)識(shí)別全省8成以上的數(shù)據(jù)欺詐,我們的目標(biāo)是五年實(shí)現(xiàn)上市。
公司主頁(yè)