職位描述
ETLPythonScala
崗位職責(zé)：
1、設(shè)計和開發(fā)大規(guī)模預(yù)訓(xùn)練數(shù)據(jù)處理鏈路，為基座模型預(yù)訓(xùn)練提供穩(wěn)定、可靠的高質(zhì)量數(shù)據(jù)處理能力，包括數(shù)據(jù)尋源、數(shù)據(jù)抓取/采集、數(shù)據(jù)解析(OCR、圖片、網(wǎng)頁)等工作內(nèi)容;
2、設(shè)計和開發(fā)服務(wù)大模型預(yù)訓(xùn)練的數(shù)據(jù)平臺，管理數(shù)據(jù)的元信息、血緣、存儲治理等數(shù)據(jù)全生命周期要素;提供預(yù)訓(xùn)練數(shù)據(jù)的可視化、可觀測能力;探索數(shù)據(jù)實驗、數(shù)據(jù)發(fā)版的工程上限;
3、針對LLM、VLM等模型構(gòu)建數(shù)據(jù)合成方案和框架，支持數(shù)據(jù)Scale等工作;
4、根據(jù)大模型訓(xùn)練數(shù)據(jù)特點，抽象并開發(fā)高效、可靠的數(shù)據(jù)加工框架，提升所有大模型算法工程師處理數(shù)據(jù)的工程效率；
1、設(shè)計和開發(fā)大規(guī)模預(yù)訓(xùn)練數(shù)據(jù)處理鏈路，為基座模型預(yù)訓(xùn)練提供穩(wěn)定、可靠的高質(zhì)量數(shù)據(jù)處理能力，包括數(shù)據(jù)尋源、數(shù)據(jù)抓取/采集、數(shù)據(jù)解析(OCR、圖片、網(wǎng)頁)等工作內(nèi)容;
2、設(shè)計和開發(fā)服務(wù)大模型預(yù)訓(xùn)練的數(shù)據(jù)平臺，管理數(shù)據(jù)的元信息、血緣、存儲治理等數(shù)據(jù)全生命周期要素;提供預(yù)訓(xùn)練數(shù)據(jù)的可視化、可觀測能力;探索數(shù)據(jù)實驗、數(shù)據(jù)發(fā)版的工程上限;
3、針對LLM、VLM等模型構(gòu)建數(shù)據(jù)合成方案和框架，支持數(shù)據(jù)Scale等工作;
4、根據(jù)大模型訓(xùn)練數(shù)據(jù)特點，抽象并開發(fā)高效、可靠的數(shù)據(jù)加工框架，提升所有大模型算法工程師處理數(shù)據(jù)的工程效率；
任職要求：
1、本科及以上學(xué)歷，計算機相關(guān)專業(yè)優(yōu)先；
2、三年以上本崗位工作經(jīng)驗；
3、熟悉 Python 編程語言，熟悉計算機圖形學(xué)，熟悉；
4、良好的溝通協(xié)調(diào)能力和團隊合作精神;
5、較強的主動性、責(zé)任心與執(zhí)行能力，能獨立承擔(dān)任務(wù)和有系統(tǒng)進度把控能力。
3、熟悉 Python 編程語言，熟悉計算機圖形學(xué)，熟悉；
4、良好的溝通協(xié)調(diào)能力和團隊合作精神;
5、較強的主動性、責(zé)任心與執(zhí)行能力，能獨立承擔(dān)任務(wù)和有系統(tǒng)進度把控能力。
查看全部
工作地點
秦皇島撫寧區(qū)開發(fā)區(qū)數(shù)谷大廈
相似職位
查看更多相似職位
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風(fēng)汽車招聘
- 長城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長鑫存儲招聘
- 天江藥業(yè)招聘
- 藍月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- ?？低曊衅?/a>
- 寧德時代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團招聘
- 中國移動招聘
- 中國聯(lián)通招聘
- 中國電信招聘
- 中糧集團招聘
- 國藥控股招聘
- 中廣核招聘
- 中國船舶招聘
- 強生中國招聘
- 匯豐中國招聘
- 宜家招聘
- 立邦中國招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
徐秋琦/經(jīng)理
今日活躍立即溝通
河北數(shù)微信息技術(shù)有限公司河北數(shù)微信息技術(shù)有限公司是一家用獨家技術(shù)與模式領(lǐng)跑中國城市末端服務(wù)與治理的生態(tài)創(chuàng)新型科技企業(yè)。公司基于物聯(lián)網(wǎng)、大數(shù)據(jù)、AI等高新技術(shù)獨家研發(fā)的社區(qū)一站式服務(wù)共享大廳，將政務(wù)大廳、公共服務(wù)大廳及商用營業(yè)廳的業(yè)務(wù)全部集成，延伸進社區(qū)，實現(xiàn)群眾“大廳事，小區(qū)辦”，改寫了中國政務(wù)、公共及商用服務(wù)的傳統(tǒng)模式。同時，公司運用獨創(chuàng)的“技術(shù)+應(yīng)用+運營”三位一體解決方案，實現(xiàn)了建設(shè)少投入、運行不花錢、數(shù)據(jù)成財富，為智慧城市發(fā)展和數(shù)字政府建設(shè)開辟一條全新路徑。公司十余年投入巨資打造出“數(shù)智微生態(tài)”，憑借獨家掌握的城市末端服務(wù)融合與社區(qū)生態(tài)化運營的核心技術(shù)，形成超越行業(yè)巨頭6年以上領(lǐng)先優(yōu)勢，成為智慧城市數(shù)智微生態(tài)首倡者、數(shù)智社區(qū)生態(tài)化運營先行者、政務(wù)服務(wù)“一端通辦”開創(chuàng)者、城市末端數(shù)據(jù)生態(tài)創(chuàng)造者。
公司主頁