工作職責(zé):
1. 負(fù)責(zé)大數(shù)據(jù)集群組件搭建與調(diào)試;
2. 支撐業(yè)務(wù)的數(shù)據(jù)模型建設(shè)以及數(shù)據(jù)指標(biāo)的計(jì)算和分析;
3. 負(fù)責(zé)數(shù)據(jù)清洗,ETL,數(shù)據(jù)處理程序開發(fā);
4. 負(fù)責(zé)錯(cuò)誤日志分析,集群故障修復(fù),數(shù)據(jù)處理性能優(yōu)化。
任職資格:
1、三年全職數(shù)據(jù)開發(fā)工作經(jīng)驗(yàn),精通Hadoop,Kafka,Hive相關(guān)大數(shù)據(jù)組件的搭建與調(diào)試,精通Mapreduce,Spark,Streamming程序編寫,有億級(jí)數(shù)據(jù)處理經(jīng)驗(yàn)者優(yōu)先;
2、精通JAVA,Scala語言,有著豐富的編程經(jīng)驗(yàn),精通python者優(yōu)先 ;
3、具備良好的溝通能力和團(tuán)隊(duì)合作精神,具備較強(qiáng)的邏輯分析能力、優(yōu)秀的分析問題和解決問題的能力。