国产精品又长又粗又爽又黄的毛片, 国产AV无码专区亚洲AV毛片搜, 丰满人妻被猛烈进入中文字幕四川, 国产精品一区二区三区国产女人喷,亚洲国产欧美日韩图片在线人,潘娇娇337p人艺体艺术,成人免费无码大片a毛片古装,一本到高清视频免费,人妻在线视频免费看

更新于 8月20日

flink大數(shù)據(jù)工程師

1.2-1.5萬(wàn)
  • 南京鼓樓區(qū)
  • 5-10年
  • 本科
  • 全職
  • 招1人

職位描述

ScalaJavaFlink
工作職責(zé)
1、 實(shí)時(shí)數(shù)倉(cāng)搭建及開(kāi)發(fā)
●基于Flink構(gòu)建秒級(jí)實(shí)時(shí)數(shù)倉(cāng)構(gòu)建(Kafka→Flink→OLAP)
●開(kāi)發(fā)實(shí)時(shí)數(shù)據(jù)處理框架(事務(wù)消息處理、窗口聚合優(yōu)化)
●實(shí)現(xiàn)復(fù)雜業(yè)務(wù)邏輯的狀態(tài)流計(jì)算(CEP、狀態(tài)TTL管理、維表Join優(yōu)化)
2、flink組件深度調(diào)優(yōu)
●攻克Checkpoint超時(shí)/反壓/State Backend性能瓶頸
●設(shè)計(jì)RocksDB狀態(tài)后端調(diào)優(yōu)方案(增量CKP、壓縮策略)
●實(shí)施JVM/網(wǎng)絡(luò)層全鏈路參數(shù)優(yōu)化(GC策略、堆外內(nèi)存管控)
3、實(shí)時(shí)數(shù)倉(cāng)穩(wěn)定性建設(shè)
●構(gòu)建監(jiān)控告警體系(延遲追蹤、狀態(tài)數(shù)據(jù)健康度)
●開(kāi)發(fā)自動(dòng)化運(yùn)維工具(Savepoint遷移、作業(yè)智能診斷)
●設(shè)計(jì)跨集群容災(zāi)方案(雙活集群切換、數(shù)據(jù)一致性保障)
4、業(yè)務(wù)工程師技術(shù)賦能
●提煉Flink最佳實(shí)踐(反壓SOP、狀態(tài)序列化規(guī)范)
●指導(dǎo)初中級(jí)工程師解決生產(chǎn)環(huán)境故障
技術(shù)能力
1. 5+年大數(shù)據(jù)開(kāi)發(fā)經(jīng)驗(yàn), 3年Flink生產(chǎn)環(huán)境深度開(kāi)發(fā)經(jīng)驗(yàn);
2.實(shí)時(shí)數(shù)倉(cāng)從0到1搭建,有百億級(jí)數(shù)據(jù)實(shí)時(shí)數(shù)倉(cāng)建設(shè)經(jīng)驗(yàn);
3. 精通 Scala/ Java 編程語(yǔ)言,具備良好的函數(shù)式編程思想。
4.熟悉hadoop生態(tài)以下組件:hadoop、spark、zookpeer、kafka
5.熟悉redis、ClickHouse
6. Flink核心組件能力要求 :
●精通DataStream API開(kāi)發(fā)(Watermark/Window/State深度使用)
●精通Flink SQL性能優(yōu)化(動(dòng)態(tài)表/Retract機(jī)制/UDF開(kāi)發(fā))
7.具備TB級(jí)狀態(tài)數(shù)據(jù)運(yùn)維經(jīng)驗(yàn)(RocksDB調(diào)優(yōu)/狀態(tài)遷移)
●解決過(guò)Checkpoint超時(shí)導(dǎo)致的數(shù)據(jù)回溯問(wèn)題
●優(yōu)化過(guò)高峰期作業(yè)反壓(定位網(wǎng)絡(luò)棧/線程阻塞問(wèn)題)
8.有狀態(tài)計(jì)算性能提升50%+的調(diào)優(yōu)案例
●熟練整合Flink CDC實(shí)現(xiàn)實(shí)時(shí)數(shù)倉(cāng)入湖(Hudi/Iceberg)
●開(kāi)發(fā)過(guò)Kafka/Pulsar到Flink的高效消費(fèi)方案架構(gòu)理解
●深入理解Lambda/Kappa架構(gòu)優(yōu)劣及落地場(chǎng)景
●設(shè)計(jì)過(guò)支撐日百億級(jí)數(shù)據(jù)的流處理架構(gòu)
9.有傳統(tǒng)機(jī)器學(xué)習(xí)經(jīng)驗(yàn)優(yōu)先,熟悉lightGBM、Xgboost等傳統(tǒng)機(jī)器學(xué)習(xí)

工作地點(diǎn)

南京鼓樓區(qū)江蘇省通信管理局15層

職位發(fā)布者

高女士/經(jīng)理

昨日活躍
立即溝通
公司Logo中德福林
北京中德福林軟件科技有限公司致力于企業(yè)信息化和呼叫中心領(lǐng)域的研發(fā)開(kāi)發(fā)及市場(chǎng)推廣,憑借在CTI領(lǐng)域的先進(jìn)產(chǎn)品,軟交換機(jī)、IVR/IFR、數(shù)字錄音系統(tǒng)、外撥系統(tǒng)、客戶服務(wù)中心系統(tǒng)以及短信網(wǎng)關(guān)和短信平臺(tái)系統(tǒng)來(lái)為中小型企業(yè)提供專業(yè)化的細(xì)致服務(wù)。公司崇尚"以市場(chǎng)為導(dǎo)向,以技術(shù)為后盾,以服務(wù)為保障"的發(fā)展宗旨,深入領(lǐng)會(huì)客戶需求,將當(dāng)今計(jì)算機(jī)及通信領(lǐng)域最先進(jìn)的技術(shù)和我們的智慧相結(jié)合,不斷推出針對(duì)行業(yè)的全面解決方案及產(chǎn)品,多年的通信軟件和信息化軟件開(kāi)發(fā)經(jīng)驗(yàn)使公司在軟件開(kāi)發(fā),系統(tǒng)維護(hù)方面有著豐富的經(jīng)驗(yàn)和雄厚的實(shí)力。公司奉行“以人為本”“鼓勵(lì)創(chuàng)新”的管理理念,為員工的盡情發(fā)揮提供了廣闊的發(fā)展空間和創(chuàng)業(yè)空間,在產(chǎn)品上不斷推陳出新;公司面向政府的信息化建設(shè)、企業(yè)的呼叫中心建設(shè)、電信運(yùn)行商的增值服務(wù)平臺(tái)建設(shè)和各級(jí)客戶關(guān)系管理建設(shè)。公司的快速發(fā)展離不開(kāi)社會(huì)各界對(duì)公司的信任和支持,公司深知只有不斷加大具有核心競(jìng)爭(zhēng)力產(chǎn)品的研發(fā),才能在信息化時(shí)代的大潮中勇立潮頭,為廣大用戶提供適合時(shí)代發(fā)展的產(chǎn)品;公司力求在體現(xiàn)社會(huì)價(jià)值的同時(shí)提升個(gè)人和企業(yè)的自身價(jià)值,打造知名品牌企業(yè),與用戶一起共創(chuàng)美好未來(lái)。公司將繼續(xù)發(fā)揮自身技術(shù)和人才的優(yōu)勢(shì),不斷完善與改進(jìn)現(xiàn)有的軟、硬件產(chǎn)品,同時(shí)加大新產(chǎn)品、新技術(shù)的研發(fā)力度,不斷以優(yōu)質(zhì)的高科技產(chǎn)品、周到的技術(shù)服務(wù)為廣大用戶提供更好的手段,來(lái)共同推進(jìn)整個(gè)社會(huì)的信息化進(jìn)程。北京地址:北京市海淀區(qū)上地十街輝煌國(guó)際中心1號(hào)樓1204
公司主頁(yè)