崗位職責:1、負責利用公司自研平臺進行數據治理交付、數據分析、服務開發(fā)和維護工作;
2、在數據治理過程中收集新需求,反饋給產品解決;
3、負責平臺與大數據組件對接調試工作;
4、主導項目數據治理交付工作,參與數據治理架構設計;
5、在平臺框架內進行數據治理UDF函數開發(fā);
6、負責與其他部門之間數據對接工作;
7、完成領導交辦的其他任務;
崗位要求:
1、本科學歷,計算機相關專業(yè),3年以內數據開發(fā)、分析相關經驗,具備獨立開發(fā)能力優(yōu)先;
2、熟悉Java、Python、Shell任何一門語言優(yōu)先;
3、熟悉使用mysql、posgresql、oracle等關系型數據庫,熟悉 SQL 語法和 Linux 系統(tǒng)基本操作;
4、熟悉使用ssm框架,熟悉使用springboot以及springcloud全家桶開發(fā);
5、熟練使用Hadoop、Spark、Hive、Flink、Hbase、Kafak、ES、Mpp等大數據框架,理解大數據組件底層工作原理,具備部署、調優(yōu)和數據備份遷移能力;
6、具備利用大數據組件的開源功能進行數據ETL的能力;
7、熟悉流式數據處理框架以及離線數倉架構;
8、熟悉DAMA數據治理理論;
9、了解華為云、騰訊云、阿里云大數據組件的使用優(yōu)先;
10、具備良好的業(yè)務理解能力,對數據敏感,有較強邏輯分析能力;
11、有極強的自我驅動力、較強的提煉能力/組織能力/溝通能力與情緒管理能力,具備強烈的責任心與良好的溝通能力和團隊合作精神。