工作職責(zé)
1. 結(jié)構(gòu)化數(shù)據(jù)服務(wù)平臺建設(shè)
自動化集群部署：設(shè)計(jì)和實(shí)現(xiàn)數(shù)據(jù)庫集群（如MySQL、PostgreSQL、Oracle高可用架構(gòu)）的快速部署、自動化擴(kuò)縮容與配置管理。
自服務(wù)門戶：建設(shè)內(nèi)部平臺，讓業(yè)務(wù)方可以自助申請、創(chuàng)建、監(jiān)控和管理自己的數(shù)據(jù)庫實(shí)例。
高可用與容災(zāi)：為每個(gè)數(shù)據(jù)庫實(shí)例提供默認(rèn)的高可用方案（如自動故障切換）和備份恢復(fù)機(jī)制（如定時(shí)快照、Binlog備份）。資源隔離與配額管理：實(shí)現(xiàn)CPU、內(nèi)存、存儲和連接數(shù)的資源限制與監(jiān)控，防止單一服務(wù)過度消耗資源影響其它服務(wù)。
2.非結(jié)構(gòu)化文件服務(wù)平臺建設(shè)
主導(dǎo)非結(jié)構(gòu)化數(shù)據(jù)存儲架構(gòu)規(guī)劃，設(shè)計(jì)整合對象存儲、文件系統(tǒng)等混合存儲方案
構(gòu)建高可用分布式存儲集群，設(shè)計(jì)數(shù)據(jù)冗余策略和跨區(qū)域容災(zāi)方案
確保平臺具備彈性擴(kuò)展能力，滿足業(yè)務(wù)快速增長需求
提供標(biāo)準(zhǔn)化的S3、NFS等訪問協(xié)議，確保與各業(yè)務(wù)系統(tǒng)無縫集成
3.大數(shù)據(jù)基礎(chǔ)平臺建設(shè)
實(shí)時(shí)分析平臺：設(shè)計(jì)基于 Apache Flink 的流處理管道。選擇合適的實(shí)時(shí)OLAP數(shù)據(jù)庫（如 ClickHouse、 Apache Doris）。
離線分析平臺：構(gòu)建基于 Apache Spark、Hive、Tez 的大規(guī)模分布式批處理集群，與資源調(diào)度器（如 YARN、 Kubernetes）緊密集成，高效管理集群資源。
交互式查詢：架構(gòu)和優(yōu)化OLAP引擎，如 Presto / Trino、 Apache Druid、 ClickHouse，設(shè)計(jì)湖倉一體架構(gòu)，使查詢引擎能直接、高速地分析數(shù)據(jù)湖（S3）中的數(shù)據(jù)。
任職資格
1.結(jié)構(gòu)化數(shù)據(jù)服務(wù)能力：精通主流數(shù)據(jù)庫（MySQL/PostgreSQL/Oracle）的高可用架構(gòu)、自動化運(yùn)維與平臺化建設(shè)，具備資源隔離與容災(zāi)備份設(shè)計(jì)經(jīng)驗(yàn)。
2.非結(jié)構(gòu)化數(shù)據(jù)架構(gòu)能力：掌握對象存儲與文件系統(tǒng)，能設(shè)計(jì)高可用、可彈性擴(kuò)展的分布式存儲集群及跨區(qū)域容災(zāi)方案。
3.大數(shù)據(jù)平臺技術(shù)棧：具備構(gòu)建實(shí)時(shí)（如Flink）、離線（如Spark/Hive）及交互式查詢（如Presto/ClickHouse）數(shù)據(jù)處理平臺的能力，熟悉湖倉一體架構(gòu)。
4.平臺化與自動化思維：擅長通過自服務(wù)門戶、自動化部署與資源管理，提升數(shù)據(jù)基礎(chǔ)設(shè)施的效率和資源治理水平。