国产精品又长又粗又爽又黄的毛片, 国产AV无码专区亚洲AV毛片搜, 丰满人妻被猛烈进入中文字幕四川, 国产精品一区二区三区国产女人喷,亚洲国产欧美日韩图片在线人,潘娇娇337p人艺体艺术,成人免费无码大片a毛片古装,一本到高清视频免费,人妻在线视频免费看

更新于 7月11日

后端開(kāi)發(fā)工程師大數(shù)據(jù)方向(設(shè)計(jì)院)

8000-11000元

職位描述

HadoopSparkKafka數(shù)據(jù)架構(gòu)數(shù)據(jù)建模數(shù)據(jù)脫敏SqlAPI
大數(shù)據(jù)后端開(kāi)發(fā)工程師
一、崗位職責(zé)
1.數(shù)據(jù)架構(gòu)搭建:設(shè)計(jì)與維護(hù)企業(yè)級(jí)大數(shù)據(jù)平臺(tái)架構(gòu),負(fù)責(zé)數(shù)據(jù)采集、存儲(chǔ)、計(jì)算、分析的全鏈路開(kāi)發(fā)(如日志采集、業(yè)務(wù)數(shù)據(jù)同步、數(shù)據(jù)倉(cāng)庫(kù)建設(shè))。
2.核心組件開(kāi)發(fā):基于 Hadoop/Spark/Flink 等框架開(kāi)發(fā)數(shù)據(jù)處理模塊,實(shí)現(xiàn)海量數(shù)據(jù)的清洗、轉(zhuǎn)換、聚合。
3.數(shù)據(jù)服務(wù)構(gòu)建:開(kāi)發(fā)數(shù)據(jù) API 接口,為前端應(yīng)用、BI 系統(tǒng)、AI 模型提供穩(wěn)定的數(shù)據(jù)支撐。
4.平臺(tái)優(yōu)化與運(yùn)維:監(jiān)控大數(shù)據(jù)集群運(yùn)行狀態(tài)(CPU / 內(nèi)存 / 磁盤使用情況),處理數(shù)據(jù)傾斜、任務(wù)超時(shí)等問(wèn)題,定期優(yōu)化集群配置(如調(diào)整并行度、資源分配),確保平臺(tái) 7×24 小時(shí)穩(wěn)定運(yùn)行。
任職要求
二、核心技術(shù)能力
1.熟練使用 Hadoop 生態(tài)(HDFS、YARN、Hive)、Spark/Spark Streaming 或 Flink,能寫數(shù)據(jù)處理腳本,了解分布式計(jì)算原理。
2.熟悉 Kafka 等消息隊(duì)列,能設(shè)計(jì)數(shù)據(jù)實(shí)時(shí)同步流程(。
3.掌握 HBase/ClickHouse 等分布式數(shù)據(jù)庫(kù)(存海量結(jié)構(gòu)化數(shù)據(jù))、Elasticsearch(做數(shù)據(jù)檢索),懂列式存儲(chǔ)與行式存儲(chǔ)的區(qū)別。
4.精通 SQL 與 Spark SQL,能寫復(fù)雜數(shù)據(jù)關(guān)聯(lián)查詢,并優(yōu)化查詢性能。
三、開(kāi)發(fā)與工程能力
1.熟練使用 Java/Scala 編程,能基于大數(shù)據(jù)框架開(kāi)發(fā)自定義算子,用 Maven/Gradle 管理項(xiàng)目依賴。
2.了解數(shù)據(jù)倉(cāng)庫(kù)建模(如星型模型、雪花模型),能根據(jù)業(yè)務(wù)需求設(shè)計(jì)數(shù)據(jù)分層(原始數(shù)據(jù)層→清洗層→應(yīng)用層)。
3.熟悉 Kubernetes、Docker,能在云上部署大數(shù)據(jù)集群。
4.了解 Superset/Tableau 等可視化工具的數(shù)據(jù)對(duì)接,或與 AI 團(tuán)隊(duì)協(xié)作提供模型訓(xùn)練數(shù)據(jù)。
5.懂?dāng)?shù)據(jù)脫敏、權(quán)限控制,了解數(shù)據(jù)合規(guī)要求。
6.熟悉Flink CDC 實(shí)時(shí)同步、湖倉(cāng)一體架構(gòu)。

工作地點(diǎn)

濟(jì)南歷下區(qū)山東省水利勘測(cè)設(shè)計(jì)院有限公司

職位發(fā)布者

張女士/hr

當(dāng)前在線
立即溝通
公司Logo濟(jì)南潮辰信息科技有限公司
濟(jì)南潮辰信息科技有限公司成立于2016年,總部設(shè)在濟(jì)南,我們是一家致力于銀行業(yè)傳統(tǒng)管理系統(tǒng)解決方案的服務(wù)商,是在金融、通信行業(yè)建設(shè)方面擁有豐富服務(wù)經(jīng)驗(yàn)的高新技術(shù)軟件企業(yè)。我們憑借公司全流程的咨詢、人性化的服務(wù)、豐富的行業(yè)解決方案經(jīng)驗(yàn)和跨界組合的團(tuán)隊(duì)使我們贏得了眾多的客戶,我們的客戶遍及銀行、通信、保險(xiǎn)等眾多領(lǐng)域,通過(guò)我們真誠(chéng)、專業(yè)及規(guī)范的綜合服務(wù),贏得了客戶的廣泛贊譽(yù)。創(chuàng)新是企業(yè)發(fā)展的源泉,人才是企業(yè)創(chuàng)新的根本。尊重人才,重視人才一直是公司秉承的基本管理理念。來(lái)自國(guó)內(nèi)外知名企業(yè)的管理和技術(shù)精英、匯聚國(guó)內(nèi)重點(diǎn)高校的年輕才俊,使得公司擁有一支富有戰(zhàn)斗力的優(yōu)秀團(tuán)隊(duì)。開(kāi)放、合作、共贏是公司秉承的基本理念。多年來(lái),公司與眾多國(guó)內(nèi)知名廠商建立良好的合作關(guān)系。我們秉承以創(chuàng)新的解決方案和專業(yè)化的服務(wù),創(chuàng)造、傳播、傳遞客戶價(jià)值,力爭(zhēng)成為客戶終身合作伙伴的服務(wù)宗旨,我們得到了眾多客戶的首肯和厚愛(ài),給了我們長(zhǎng)期服務(wù)于客戶的機(jī)會(huì)。目前,我們正全力投入在銀行業(yè)傳統(tǒng)資源管理領(lǐng)域、移動(dòng)安全管理領(lǐng)域和通信大數(shù)據(jù)挖掘領(lǐng)域深度研究,以此,不僅將公司形象又提升一個(gè)全新的高度,更可以幫助客戶全面提升競(jìng)爭(zhēng)力。
公司主頁(yè)