国产精品又长又粗又爽又黄的毛片, 国产AV无码专区亚洲AV毛片搜, 丰满人妻被猛烈进入中文字幕四川, 国产精品一区二区三区国产女人喷,亚洲国产欧美日韩图片在线人,潘娇娇337p人艺体艺术,成人免费无码大片a毛片古装,一本到高清视频免费,人妻在线视频免费看

更新于 8月19日

數(shù)據(jù)爬蟲工程師(雙休+14薪)

1.5-2.2萬·14薪
  • 北京海淀區(qū)
  • 3-5年
  • 大專
  • 全職
  • 招1人

職位描述

PythonSQLJava數(shù)據(jù)清洗反爬蟲HadoopKettle云計算/大數(shù)據(jù)
1. 負(fù)責(zé)基于大學(xué)官網(wǎng)所需數(shù)據(jù)的爬取、采集、調(diào)優(yōu)、排錯等研發(fā)工作;
2. 負(fù)責(zé)對爬取數(shù)據(jù)進(jìn)行的清洗、整理、修復(fù)工作,形成高質(zhì)量的采集輸出;
3. 針對需要的數(shù)據(jù),尋找網(wǎng)站內(nèi)可用的接口;
4. 開發(fā)結(jié)構(gòu)化數(shù)據(jù)抽取和解析的可視化平臺,提升數(shù)據(jù)抓取解析開發(fā)運營效率;
任職要求:
1. 熟悉python自動化測試框架,如playwright、DrissionPage等。
2. 熟練掌握Python編程,熟悉kafka、mongodb、mysql、redis等。
3. 熟悉分布式,多線程,至少熟悉一種爬蟲框架(如Scrapy、Feapdr等)。
4. 深入理解爬蟲和反爬技術(shù),精通http底層協(xié)議,熟悉各類驗證碼破解、動態(tài)網(wǎng)頁抓取如文本混淆反爬蟲等等技術(shù)
5. 有良好的責(zé)任心、溝通能力、學(xué)習(xí)能力、團隊協(xié)作精神。
6. 能夠?qū)?fù)雜數(shù)據(jù)進(jìn)行高效提取和清洗,具備良好的分析能力和解決問題的能力,能夠應(yīng)對復(fù)雜的反爬挑戰(zhàn)。
7. 對主流爬蟲架構(gòu)有深入研究,具有成熟爬蟲工具的設(shè)計及運維經(jīng)驗;
8. 能夠處理極驗驗證碼。
9. 要求3年左右行業(yè)開發(fā)經(jīng)驗。

工作地點

北京海淀區(qū)未來科技大廈411

職位發(fā)布者

朱女士/招聘主管

剛剛活躍
立即溝通
鄭州載望升學(xué)教育科技有限公司
載望升學(xué)成立于2020年,公司主要是在抖音、快手、視頻號等各大短視頻平臺做知識付費類的直播及短視頻。公司先后在高考志愿填報、升學(xué)規(guī)劃、幼教管理、家庭教育、英語啟蒙、大語文教育、書法教育、企業(yè)培訓(xùn)等多個方向進(jìn)行了新媒體賦能的探索,并獲得了足夠影響力的成功,其中,高考志愿填報、升學(xué)規(guī)劃方向的多個賬號在抖音平臺都已成為全國頭部!!!經(jīng)過近4年的發(fā)展,河南新融媒體運營中心已成為河南省最具影響力的知識分享IP孵化中心!公司領(lǐng)導(dǎo)層多來自復(fù)旦大學(xué)等高校,學(xué)霸天團打造成熟專業(yè)的運營團隊、200多名優(yōu)秀員工(普通本科)、20多個專業(yè)直播間、2000多平辦公場地、20多個達(dá)人主播全平臺粉絲上千萬。工作氛圍和諧有活力,秒殺同行的薪酬體系,下午茶節(jié)日福利團建聚餐等各類福利一應(yīng)俱全。兼具軟實力硬實力及成功案例,就是有信心成就您!
公司主頁