職位描述
大數(shù)據(jù)平臺(tái)運(yùn)維REDHAT/CENTOSPrometheusGrafana互聯(lián)網(wǎng)銀行互聯(lián)網(wǎng)金融/小額貸款
【崗位職責(zé)】
1、負(fù)責(zé)大數(shù)據(jù)集群核心組件的全生命周期運(yùn)維，包括Ambari部署管理、Hadoop（HDFS/YARN）集群運(yùn)維、Spark/Flink計(jì)算任務(wù)支持、Hive/HBase數(shù)據(jù)存儲(chǔ)管理，以及 Kylin、Doris、ES、Zookeeper、海豚調(diào)度器的日常巡檢、故障排查與版本升級(jí)，保障集群7×24小時(shí)穩(wěn)定運(yùn)行。2、參與大數(shù)據(jù)技術(shù)體系的信創(chuàng)適配落地與運(yùn)維，針對(duì)飛騰、海光、鯤鵬芯片服務(wù)器，以及麒麟 V10SP2/3 操作系統(tǒng)，解決組件兼容性問題（如 Hadoop與鯤鵬芯片驅(qū)動(dòng)適配、Flink在麒麟系統(tǒng)的依賴庫沖突），沉淀信創(chuàng)環(huán)境運(yùn)維手冊(cè)與故障處理預(yù)案。
3、基于 RedHat、CentOS、麒麟 V10SP2/3 操作系統(tǒng)，通過Shell腳本實(shí)現(xiàn)運(yùn)維任務(wù)自動(dòng)化，如集群狀態(tài)批量檢查、日志定期清理、配置跨節(jié)點(diǎn)同步；同時(shí)利用Python或Go 語言研發(fā)運(yùn)維工具，提升運(yùn)維效率（如歷史故障自動(dòng)分析工具、組件配置校驗(yàn)工具）。
4、參與集群容量規(guī)劃、性能調(diào)優(yōu)與監(jiān)控告警體系迭代，結(jié)合業(yè)務(wù)數(shù)據(jù)增長與計(jì)算需求，輸出資源擴(kuò)容建議；針對(duì)慢查詢、任務(wù)阻塞等問題，聯(lián)合業(yè)務(wù)團(tuán)隊(duì)優(yōu)化SQL語句、調(diào)整組件參數(shù)。
5、負(fù)責(zé)運(yùn)維文檔沉淀，包括集群架構(gòu)圖、組件部署手冊(cè)、故障處理案例、信創(chuàng)適配指南等，配合團(tuán)隊(duì)完成新人帶教與技術(shù)分享。
6、完成領(lǐng)導(dǎo)安排的其他工作。
【任職要求】
1、本科及以上學(xué)歷，計(jì)算機(jī)、大數(shù)據(jù)、軟件工程相關(guān)專業(yè)優(yōu)先，3年及以上大數(shù)據(jù)集群運(yùn)維經(jīng)驗(yàn)，有金融、互聯(lián)網(wǎng)等大規(guī)模集群（50節(jié)點(diǎn)以上）運(yùn)維經(jīng)驗(yàn)者優(yōu)先。
2、精通Hadoop生態(tài)組件原理與運(yùn)維，能獨(dú)立解決HDFS塊丟失、YARN資源死鎖、Hive元數(shù)據(jù)損壞、Flink任務(wù)背壓等復(fù)雜故障；熟悉Spark/Flink任務(wù)提交、資源配置與調(diào)優(yōu)，了解Kylin/Doris的預(yù)計(jì)算邏輯與查詢優(yōu)化。
3、熟練使用RedHat/CentOS系統(tǒng)命令，精通Shell腳本編程；具備Python或Go語言開發(fā)能力，有實(shí)際大數(shù)據(jù)運(yùn)維工具開發(fā)案例（如自動(dòng)化部署工具、巡檢工具）者優(yōu)先。
4、熟悉監(jiān)控告警工具（如 Prometheus、Grafana、夜鶯），能獨(dú)立搭建組件監(jiān)控面板、配置告警規(guī)則；具備容量規(guī)劃、性能調(diào)優(yōu)經(jīng)驗(yàn)，了解云原生技術(shù)（Docker、K8s）者優(yōu)先。
5、具備較強(qiáng)的問題分析與應(yīng)急處理能力，責(zé)任心強(qiáng)，能接受節(jié)假日值班與突發(fā)故障應(yīng)急響應(yīng)。
2、精通Hadoop生態(tài)組件原理與運(yùn)維，能獨(dú)立解決HDFS塊丟失、YARN資源死鎖、Hive元數(shù)據(jù)損壞、Flink任務(wù)背壓等復(fù)雜故障；熟悉Spark/Flink任務(wù)提交、資源配置與調(diào)優(yōu)，了解Kylin/Doris的預(yù)計(jì)算邏輯與查詢優(yōu)化。
3、熟練使用RedHat/CentOS系統(tǒng)命令，精通Shell腳本編程；具備Python或Go語言開發(fā)能力，有實(shí)際大數(shù)據(jù)運(yùn)維工具開發(fā)案例（如自動(dòng)化部署工具、巡檢工具）者優(yōu)先。
4、熟悉監(jiān)控告警工具（如 Prometheus、Grafana、夜鶯），能獨(dú)立搭建組件監(jiān)控面板、配置告警規(guī)則；具備容量規(guī)劃、性能調(diào)優(yōu)經(jīng)驗(yàn)，了解云原生技術(shù)（Docker、K8s）者優(yōu)先。
5、具備較強(qiáng)的問題分析與應(yīng)急處理能力，責(zé)任心強(qiáng)，能接受節(jié)假日值班與突發(fā)故障應(yīng)急響應(yīng)。
工作地點(diǎn)
北京石景山區(qū)古城創(chuàng)業(yè)大廈-1號(hào)樓
相似職位
- 自動(dòng)化及網(wǎng)絡(luò)安全值班員6000-7000元
北京 - 朝陽
中電瑋燁電力設(shè)備工程有限公司 - 智慧平臺(tái)運(yùn)營工程師1-1.5萬
北京 - 海淀
中建生態(tài)環(huán)境集團(tuán)有限公司 北京 - 西城
愛多邦(北京)信息技術(shù)服務(wù)有限公司- 運(yùn)維工程師-晉升空間大-值班9000-11000元
北京 - 大興
北京光環(huán)新網(wǎng) - it服務(wù)運(yùn)維工程師9000-12000元
北京 - 昌平
北京國信華軟科技有限公司 - ibm存儲(chǔ)工程師1-1.3萬
北京 - 順義
北京銀信長遠(yuǎn)科技股份有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團(tuán)招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風(fēng)汽車招聘
- 長城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長鑫存儲(chǔ)招聘
- 天江藥業(yè)招聘
- 藍(lán)月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- 海康威視招聘
- 寧德時(shí)代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動(dòng)招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團(tuán)招聘
- 中國移動(dòng)招聘
- 中國聯(lián)通招聘
- 中國電信招聘
- 中糧集團(tuán)招聘
- 國藥控股招聘
- 中廣核招聘
- 中國船舶招聘
- 強(qiáng)生中國招聘
- 匯豐中國招聘
- 宜家招聘
- 立邦中國招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
孟艷艷/高級(jí)招聘專員
三日內(nèi)活躍立即溝通
中航信移動(dòng)科技股份有限公司中航信移動(dòng)科技有限公司成立于2014年5月，自2015年起連續(xù)獲得高新技術(shù)企業(yè)稱號(hào)。公司致力于通過科技的力量讓行業(yè)變得更美好，持續(xù)堅(jiān)持探索利用大數(shù)據(jù)、人工智能、區(qū)塊鏈等先進(jìn)技術(shù)提升民航業(yè)整體服務(wù)水平。2017年，公司被列為國家發(fā)改委第二批九家混改試點(diǎn)之一。公司旗下“航旅縱橫”是目前國內(nèi)數(shù)據(jù)權(quán)威、功能強(qiáng)大的民航信息服務(wù)產(chǎn)品，為用戶提供全方位民航出行信息服務(wù)，在應(yīng)用市場(chǎng)長期保持高分評(píng)價(jià)。公司基于移動(dòng)互聯(lián)網(wǎng)、實(shí)時(shí)計(jì)算、機(jī)器學(xué)習(xí)、微服務(wù)、邊緣計(jì)算等技術(shù)，構(gòu)建了無紙化通關(guān)、電子證照、智能計(jì)算系統(tǒng)等多個(gè)行業(yè)級(jí)基礎(chǔ)應(yīng)用平臺(tái)系統(tǒng)，廣泛在行業(yè)內(nèi)實(shí)施并應(yīng)用，顯著提升了行業(yè)的運(yùn)行效率和服務(wù)水平。相關(guān)研究入選國家自然基金重點(diǎn)項(xiàng)目，榮獲中國交通運(yùn)輸協(xié)會(huì)科技進(jìn)步一等獎(jiǎng)、中國航協(xié)科技進(jìn)步二等獎(jiǎng)等一系列獎(jiǎng)項(xiàng)，獲得50多項(xiàng)國家發(fā)明授權(quán)，通過軟件能力成熟度模型CMMI 5級(jí)認(rèn)證，公司一人獲得中國經(jīng)濟(jì)年度人物，一人獲得國務(wù)院津貼，兩人入選民航拔尖人才。
公司主頁