基本要求
1,專科及以上學歷,計算機相關專業(yè)畢業(yè)5年以上,非計算機相關專業(yè)8年以上
2,5年大數據數倉實際開發(fā)經驗,熟悉Hadoop生態(tài)系統(tǒng)各組件的原理,精通Hive SQL,熟練使用HDFS,Yarn,Spark。有較強的SQL調優(yōu),性能優(yōu)化能力;
3,對數據敏感,有較強的邏輯推理能力,對大數據處理技術有強烈熱情;
4,有ElasticSearch,StarRocks使用經驗優(yōu)先;
5,熟練使用Linux常用命令,熟練安裝常見開源產品或組件;
6,有Java開發(fā)經驗,實時Flink Jar開發(fā)經驗優(yōu)先;
崗位職責:
1, 參與用戶相關系統(tǒng)數據開發(fā),包括公司內部用戶數據處理分析,IDMAPPING,涵蓋數據接入、清洗、處理環(huán)節(jié)
2, 完成業(yè)務系統(tǒng)日常迭代的詳細設計編寫,代碼開發(fā),功能測試,高效完成交付
3, 負責結果數據存儲(ElasticSearch、StarRocks),查詢性能優(yōu)化
4, 線上問題排查和解決,疑難問題定位,快速修復,保障系統(tǒng)穩(wěn)定運行