職位描述
數(shù)據(jù)治理數(shù)據(jù)架構Spark
崗位職責：
1. 負責大數(shù)據(jù)平臺（Hadoop/Spark/Flink等）的搭建、維護和優(yōu)化，保障數(shù)據(jù)系統(tǒng)的穩(wěn)定性與擴展性。
2. 參與企業(yè)級數(shù)據(jù)治理體系建設，包括但不限于：
- 制定并落地數(shù)據(jù)標準（命名規(guī)范、口徑一致性等）；
- 完善元數(shù)據(jù)管理（數(shù)據(jù)血緣、資產(chǎn)目錄、業(yè)務屬性標簽）；
- 設計數(shù)據(jù)質(zhì)量監(jiān)控規(guī)則（完整性、準確性、時效性），推動問題閉環(huán)；
- 配合完成數(shù)據(jù)安全分級分類、權限管控及脫敏方案。
3. 設計與開發(fā)數(shù)據(jù)倉庫（ODS/DWD/DWS/ADS），構建高復用、易追溯的數(shù)據(jù)模型與ETL流程。
4. 開發(fā)實時/離線數(shù)據(jù)處理管道（Data Pipeline），確保數(shù)據(jù)高效、準確觸達業(yè)務端。
5. 協(xié)同業(yè)務部門梳理關鍵數(shù)據(jù)資產(chǎn)，推動數(shù)據(jù)治理成果在業(yè)務場景中的實際應用。
任職要求：
1.本科及以上學歷，計算機、數(shù)據(jù)科學相關專業(yè)，3年以上大數(shù)據(jù)開發(fā)經(jīng)驗。
2. 精通Hadoop生態(tài)技術（Hive/Spark/Flink），熟悉性能調(diào)優(yōu)及資源管理。
3.熟練使用SQL和至少一門編程語言（Java/Scala/Python），能編寫高效ETL代碼。
4.熟悉數(shù)據(jù)治理方法論，有數(shù)據(jù)質(zhì)量、元數(shù)據(jù)管理、數(shù)據(jù)血緣等工具實戰(zhàn)經(jīng)驗。
5.了解數(shù)據(jù)安全規(guī)范（GDPR、個人信息保護法等）及相關技術實現(xiàn)（加密/脫敏）。
6. 主導或深度參與過企業(yè)數(shù)據(jù)治理項目，熟悉DCMM等評估體系。
7.熟悉數(shù)據(jù)建模工具或數(shù)據(jù)治理平臺。
8.有數(shù)據(jù)資產(chǎn)盤點、數(shù)據(jù)價值評估等經(jīng)驗者優(yōu)先。
9.具備較強的跨團隊協(xié)作能力，能推動治理規(guī)范在業(yè)務部門落地。
10.對數(shù)據(jù)敏感，注重細節(jié)，有較強的責任心和流程規(guī)范意識。
1. 負責大數(shù)據(jù)平臺（Hadoop/Spark/Flink等）的搭建、維護和優(yōu)化，保障數(shù)據(jù)系統(tǒng)的穩(wěn)定性與擴展性。
2. 參與企業(yè)級數(shù)據(jù)治理體系建設，包括但不限于：
- 制定并落地數(shù)據(jù)標準（命名規(guī)范、口徑一致性等）；
- 完善元數(shù)據(jù)管理（數(shù)據(jù)血緣、資產(chǎn)目錄、業(yè)務屬性標簽）；
- 設計數(shù)據(jù)質(zhì)量監(jiān)控規(guī)則（完整性、準確性、時效性），推動問題閉環(huán)；
- 配合完成數(shù)據(jù)安全分級分類、權限管控及脫敏方案。
3. 設計與開發(fā)數(shù)據(jù)倉庫（ODS/DWD/DWS/ADS），構建高復用、易追溯的數(shù)據(jù)模型與ETL流程。
4. 開發(fā)實時/離線數(shù)據(jù)處理管道（Data Pipeline），確保數(shù)據(jù)高效、準確觸達業(yè)務端。
5. 協(xié)同業(yè)務部門梳理關鍵數(shù)據(jù)資產(chǎn)，推動數(shù)據(jù)治理成果在業(yè)務場景中的實際應用。
任職要求：
1.本科及以上學歷，計算機、數(shù)據(jù)科學相關專業(yè)，3年以上大數(shù)據(jù)開發(fā)經(jīng)驗。
2. 精通Hadoop生態(tài)技術（Hive/Spark/Flink），熟悉性能調(diào)優(yōu)及資源管理。
3.熟練使用SQL和至少一門編程語言（Java/Scala/Python），能編寫高效ETL代碼。
4.熟悉數(shù)據(jù)治理方法論，有數(shù)據(jù)質(zhì)量、元數(shù)據(jù)管理、數(shù)據(jù)血緣等工具實戰(zhàn)經(jīng)驗。
5.了解數(shù)據(jù)安全規(guī)范（GDPR、個人信息保護法等）及相關技術實現(xiàn)（加密/脫敏）。
6. 主導或深度參與過企業(yè)數(shù)據(jù)治理項目，熟悉DCMM等評估體系。
7.熟悉數(shù)據(jù)建模工具或數(shù)據(jù)治理平臺。
8.有數(shù)據(jù)資產(chǎn)盤點、數(shù)據(jù)價值評估等經(jīng)驗者優(yōu)先。
9.具備較強的跨團隊協(xié)作能力，能推動治理規(guī)范在業(yè)務部門落地。
10.對數(shù)據(jù)敏感，注重細節(jié)，有較強的責任心和流程規(guī)范意識。
查看全部
工作地點
南昌東湖區(qū)江西省生態(tài)環(huán)境廳
相似職位
- 大數(shù)據(jù)開發(fā)工程師實習崗100-150元/天
南昌 - 西湖
江西星瀾科技有限公司 - 高級數(shù)據(jù)開發(fā)工程師1.4-1.7萬
南昌 - 紅谷灘
上海漢朔信息科技有限公司 - 大數(shù)據(jù)開發(fā)工程師9000-12000元
南昌 - 青云譜
江西云偌信息科技有限公司 - 電信行業(yè)_數(shù)據(jù)開發(fā)工程師7000-12000元·14薪
南昌 - 西湖
天源迪科 - 大數(shù)據(jù)開發(fā)工程師1.1-1.5萬
南昌 - 紅谷灘
杭州中港科技有限公司 - 數(shù)據(jù)開發(fā)工程師7000-10000元
南昌 - 青山湖
江西同力企業(yè)服務有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風汽車招聘
- 長城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長鑫存儲招聘
- 天江藥業(yè)招聘
- 藍月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- 海康威視招聘
- 寧德時代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團招聘
- 中國移動招聘
- 中國聯(lián)通招聘
- 中國電信招聘
- 中糧集團招聘
- 國藥控股招聘
- 中廣核招聘
- 中國船舶招聘
- 強生中國招聘
- 匯豐中國招聘
- 宜家招聘
- 立邦中國招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
許女士/HRBP
立即溝通
北京嘉誠瑞杰信息技術有限公司北京嘉誠瑞杰信息技術有限公司（簡稱嘉誠瑞杰）是長春嘉誠信息技術股份有限公司的全資子公司。嘉誠信息以軟件和信息技術服務為主營業(yè)務，創(chuàng)始于1995年，于2015年10月28日成功登陸新三板，總部設在長春。二十多年間，嘉誠信息自主研發(fā)了數(shù)十項高科技產(chǎn)品，先后為黨委、政府、檢法司監(jiān)、商務、交通、金融、衛(wèi)生醫(yī)療、制造企業(yè)等多個領域的客戶提供了軟件開發(fā)、系統(tǒng)集成以及網(wǎng)絡安全等全方位專業(yè)服務。嘉誠信息擁有軟件產(chǎn)品著作權100余項，在30余行業(yè)成功應用，取得良好口碑。在大數(shù)據(jù)監(jiān)督方面，嘉誠信息走向全國的拳頭產(chǎn)品——“公益訴訟大數(shù)據(jù)應用平臺”，以互聯(lián)網(wǎng)+、大數(shù)據(jù)和人工智能、云計算等技術破解業(yè)務難題，全國首創(chuàng)，技術領先。2016年由吉林省長春市人民檢察院牽頭進行試點建設，目前已經(jīng)在吉林省全省推廣。在四川、甘肅、內(nèi)蒙、江蘇、安徽、遼寧、福建、山西等省份簽約且建設成果突出。在黑龍江，重慶，陜西等省開展試點，效果顯著。公益訴訟大數(shù)據(jù)應用平臺得到行業(yè)專家和客戶的高度認可。在網(wǎng)絡安全服務方面，嘉誠信息能夠向客戶提供網(wǎng)絡安全全生命周期及等保全流程的安全服務?，F(xiàn)擁有多名通過國際、國內(nèi)、廠家高級認證的高端安全技術人才及國內(nèi)一線白帽子。嘉誠信息具有信息安全等級保護測評及其他網(wǎng)絡安全相關資質(zhì)，連續(xù)兩年被評為“全國網(wǎng)絡安全等級保護測評機構先進單位”，在全國CNAS能力驗證及攻防比賽上，連續(xù)四年取得省內(nèi)第一、東北區(qū)第一、國內(nèi)領先的好成績。在司法行政領域，嘉誠率先推出綜合數(shù)據(jù)研判平臺，以預測、預警、預防+研判為核心目標，通過對監(jiān)獄、戒毒、社矯、監(jiān)管各行業(yè)數(shù)據(jù)相關性分析、因果性分析與模型處理，實現(xiàn)為應用者提供決策輸出，真正實現(xiàn)工作聚焦、應用提升、研判輸出。今日嘉誠，眾志成城，致力于成為客戶業(yè)務創(chuàng)新、數(shù)字化轉(zhuǎn)型最可信賴的合作伙伴。嘉誠信息，正在成為中國政務軟件信息化的核心力量！
公司主頁