崗位職責(zé):
1、負(fù)責(zé)設(shè)計(jì)并優(yōu)化數(shù)據(jù)處理系統(tǒng)的整體架構(gòu),確保系統(tǒng)能夠高效、穩(wěn)定地支持大數(shù)據(jù)存儲(chǔ)、處理和分析;
2、負(fù)責(zé)根據(jù)業(yè)務(wù)需求和技術(shù)趨勢(shì),選擇合適的技術(shù)棧和工具,構(gòu)建可擴(kuò)展、高性能的數(shù)據(jù)處理平臺(tái);
3、負(fù)責(zé)評(píng)估和優(yōu)化系統(tǒng)性能,解決系統(tǒng)瓶頸,確保數(shù)據(jù)處理和查詢的響應(yīng)速度滿足業(yè)務(wù)需求;
4、負(fù)責(zé)制定數(shù)據(jù)安全策略,確保數(shù)據(jù)處理過程中的數(shù)據(jù)安全和隱私保護(hù);
5、負(fù)責(zé)與開發(fā)團(tuán)隊(duì)緊密合作,提供架構(gòu)設(shè)計(jì)和技術(shù)支持,推動(dòng)項(xiàng)目的順利進(jìn)行;
6、負(fù)責(zé)跟蹤最新的數(shù)據(jù)處理技術(shù)和架構(gòu)趨勢(shì),不斷提升系統(tǒng)的技術(shù)水平和競(jìng)爭(zhēng)力;
7、負(fù)責(zé)參與處室系統(tǒng)的規(guī)劃和需求分析,為系統(tǒng)的發(fā)展提供戰(zhàn)略性的建議和方向。
任職要求:
1、計(jì)算機(jī)科學(xué)、軟件工程或相關(guān)領(lǐng)域本科及以上學(xué)歷;
2、精通Java/Python/Scala等至少一種編程語(yǔ)言,熟悉Hadoop、Spark、Flink、Kafka等大數(shù)據(jù)處理框架,具備分布式系統(tǒng)架構(gòu)設(shè)計(jì)與開發(fā)經(jīng)驗(yàn);
3、具有3年以上大規(guī)模數(shù)據(jù)處理平臺(tái)(如數(shù)據(jù)倉(cāng)庫(kù)、實(shí)時(shí)計(jì)算平臺(tái))的設(shè)計(jì)與優(yōu)化經(jīng)驗(yàn),熟悉ETL流程及數(shù)據(jù)建模方法論(如維度建模);
4、掌握高并發(fā)、高吞吐場(chǎng)景下的性能分析與調(diào)優(yōu)經(jīng)驗(yàn),熟悉Linux性能監(jiān)控工具(如iostat、vmstat)及分布式系統(tǒng)瓶頸診斷方法;
5、了解數(shù)據(jù)安全法律法規(guī)(如《數(shù)據(jù)安全法》《個(gè)人信息保護(hù)法》),具備數(shù)據(jù)加密、訪問控制、脫敏等安全技術(shù)的實(shí)施經(jīng)驗(yàn)。
6、具備良好的溝通能力與團(tuán)隊(duì)協(xié)作精神,能夠與業(yè)務(wù)部門、開發(fā)團(tuán)隊(duì)及運(yùn)維團(tuán)隊(duì)高效協(xié)同,推動(dòng)復(fù)雜項(xiàng)目落地。
7、關(guān)注大數(shù)據(jù)領(lǐng)域前沿技術(shù)(如云原生架構(gòu)、邊緣計(jì)算、實(shí)時(shí)分析等),有技術(shù)預(yù)研能力并能結(jié)合業(yè)務(wù)場(chǎng)景推動(dòng)創(chuàng)新實(shí)踐。
8、熟悉數(shù)據(jù)從采集、存儲(chǔ)、處理到應(yīng)用的全生命周期管理,具備從0到1搭建數(shù)據(jù)平臺(tái)或核心模塊的項(xiàng)目經(jīng)驗(yàn)。
9、有保險(xiǎn)行業(yè)大數(shù)據(jù)研發(fā)經(jīng)驗(yàn)者優(yōu)先考慮。