基本職責(zé):
-負(fù)責(zé)基于云平臺的離線數(shù)倉與實時數(shù)倉開發(fā)與落地;
-負(fù)責(zé)依托云上服務(wù)的數(shù)據(jù)基礎(chǔ)產(chǎn)品實施與交付;
-建設(shè)基于云生態(tài)的知識庫、工具及流程優(yōu)化平臺;
-編寫技術(shù)文檔,參與云上產(chǎn)品的技術(shù)支持工作。
專業(yè)能力要求:
-計算機相關(guān)專業(yè),本科及以上學(xué)歷,2 年及以上相關(guān)工作經(jīng)驗,具備扎實的計算機理論基礎(chǔ);
-熟悉云平臺基礎(chǔ)服務(wù)(如 EC2、RDS、S3、IAM、VPC 等),能夠進(jìn)行配置、優(yōu)化與安全管理;
-掌握云平臺開發(fā)類服務(wù)(如 Lambda、Glue、Kinesis、Elasticsearch、QuickSight 等),能夠?qū)崿F(xiàn)數(shù)據(jù)采集、處理、分析與可視化;
-精通在云環(huán)境中使用 Python、Spark、Flink、Elasticsearch 等語言與框架進(jìn)行數(shù)據(jù)開發(fā)與優(yōu)化;
-熟悉 Hadoop 技術(shù)生態(tài),深入理解 MapReduce,熟練使用 Hadoop、HDFS、HBase、Hive 等工具;
-具備離線數(shù)倉與實時數(shù)倉建設(shè)經(jīng)驗,能夠獨立設(shè)計與搭建數(shù)據(jù)倉庫架構(gòu);
-具備大模型技術(shù)體系知識,能進(jìn)行 RAG(檢索增強生成)方案設(shè)計與調(diào)優(yōu),并推動工程化落地;
-有前端數(shù)據(jù)可視化開發(fā)經(jīng)驗者優(yōu)先,能夠?qū)?fù)雜數(shù)據(jù)以直觀、易用的方式呈現(xiàn)。