崗位職責(zé):
1、負責(zé)各種資源數(shù)據(jù)的采集、清洗、存儲、分析流程;
2、負責(zé)大數(shù)據(jù)類產(chǎn)品的系統(tǒng)分析與架構(gòu)設(shè)計,配合產(chǎn)品經(jīng)理完成產(chǎn)品的快速研發(fā)與交付;
3、承擔(dān)建設(shè)基于Hadoop/Flink生態(tài)的大數(shù)據(jù)離線/實時處理平臺;
4、參與數(shù)據(jù)中臺產(chǎn)品的系統(tǒng)設(shè)計及開發(fā)工作,參加及支持數(shù)據(jù)中臺運維工作;
5、跟進大數(shù)據(jù)前沿技術(shù)的發(fā)展,將合適的技術(shù)方案適時引入業(yè)務(wù)場景。
任職要求:
1、本科及以上學(xué)歷或研究生及以上學(xué)歷,計算機科學(xué)等相關(guān)專業(yè);
2、3年以上的大數(shù)據(jù)開發(fā)經(jīng)驗;
2、熟悉Hadoop、Hive、Hbase、ELK等框架組件;
3、熟悉Spark、Storm、Flink、Impala、Presto等計算和數(shù)據(jù)處理引擎的環(huán)境搭建、開發(fā)和管理;
4、熟悉消息隊列的原理,熟練使用Kafka、rocketmq等常用的消息隊列;
5、熟悉java、python等語言,編碼能力優(yōu)秀,有良好的編碼習(xí)慣和風(fēng)格,重視代碼質(zhì)量和工程實踐