工作職責(zé)
1.負(fù)責(zé)大數(shù)據(jù)平臺(如 CDH、Spark/Flink Doris/StarRocks 等)的規(guī)劃、部署、升級、擴容、遷移與災(zāi)備方案實施,保障架構(gòu)的擴展性與高可用性;
2. 執(zhí)行日常巡檢 、 監(jiān)控告警 、 性能分析與故障應(yīng)急響應(yīng)，對大數(shù)據(jù)集群(Hadoop/Spark/Flink/Paimon 等)及關(guān)鍵數(shù)據(jù)庫(Doris/StarRocks/MySQL)進行深度運維、調(diào)優(yōu)與問題根治；
3.通過 Shel1/Python/Go 等腳本或工具，開發(fā)自動化運維腳本與平臺工具，實現(xiàn)部署、監(jiān)控、備份等工作的標(biāo)準(zhǔn)化與自動化，提升運維效率;
4.高效對接業(yè)務(wù)與開發(fā)團隊，支持?jǐn)?shù)據(jù)項目上線部署、變更發(fā)布與資源協(xié)調(diào)，并提供穩(wěn)定的數(shù)據(jù)服務(wù)支持;
5.參與制定并執(zhí)行數(shù)據(jù)平臺安全基線、備份策略與訪問控制規(guī)范；
任職要求
1.3 年以上數(shù)據(jù)平臺運維經(jīng)驗，精通 Linux，具備扎實的運維功底和高效的線上問題排查能力;
2. 熟練 Docker/Kubernetes 容器化技術(shù),了解 Hadoop 生態(tài)體系,對 Spark、Flink、 Kafka、Seatunnel,Dolphinscheduler 等至少兩種核心組件有豐富的部署、調(diào)優(yōu)及故障排查經(jīng)驗；
3.具備主流數(shù)據(jù)庫(如 Doris/StarRocks、ClickHouse、MySQL 等)的運維管理、性能優(yōu)化及高可用保障能力；
4.了解主流安全設(shè)備(如 WAF、堡壘機)或安全概念(如零信任、最小權(quán)限)者優(yōu)先;
5.熟悉 Prometheus、Grafana、ELK 等監(jiān)控日志體系;
6.對后端服務(wù)或前端服務(wù)的架構(gòu)、部署、監(jiān)控及性能調(diào)優(yōu)有實戰(zhàn)經(jīng)驗;
7..有 CDH 或 StarRocks 集群從零搭建、大規(guī)模運維或遷移經(jīng)驗者，有安全處理經(jīng)驗者優(yōu)先；