国产精品又长又粗又爽又黄的毛片, 国产AV无码专区亚洲AV毛片搜, 丰满人妻被猛烈进入中文字幕四川, 国产精品一区二区三区国产女人喷,亚洲国产欧美日韩图片在线人,潘娇娇337p人艺体艺术,成人免费无码大片a毛片古装,一本到高清视频免费,人妻在线视频免费看

400-885-9898
該職位已失效，看看其他機會吧
智聯(lián)APPAPP
舉報

爬蟲工程師

1-1.6萬
  • 成都武侯區(qū)
  • 3-5年
  • 大專
  • 全職
  • 招1人
查看更多相似職位

職位描述

Python反爬蟲分布式爬蟲爬蟲開發(fā)數(shù)據(jù)采集PySpiderPyppeteer
一、崗位職責(zé)：
1.負(fù)責(zé)分布式網(wǎng)絡(luò)爬蟲系統(tǒng)的架構(gòu)設(shè)計與開發(fā)，建立分布式網(wǎng)絡(luò)爬蟲系統(tǒng)；
2.負(fù)責(zé)跨境平臺中海量（百萬級數(shù)據(jù)量）數(shù)據(jù)的爬取及數(shù)據(jù)比對；
3.負(fù)責(zé)其他品牌網(wǎng)站適配數(shù)據(jù)爬蟲開發(fā)及數(shù)據(jù)的全量抓取；
4.負(fù)責(zé)破解各類反爬機制，負(fù)責(zé)系統(tǒng)模擬點擊爬取工作；
5.不斷提升數(shù)據(jù)抓取系統(tǒng)的自動化水平，負(fù)責(zé)一定程度的數(shù)據(jù)分析任務(wù)；
6.定期爬蟲任務(wù)部署及數(shù)據(jù)同步。
二、任職資格：
1.大專及以上學(xué)歷，英語四級及以上，計算機相關(guān)專業(yè)；
2.熟練掌握常用的數(shù)據(jù)庫（如myql.redi等）；熟練掌握Python，了解JavaScript.等網(wǎng)頁解析相關(guān)；
3.熟練使用elenium.requet.httplib2.crapy等常用爬蟲模塊，熟悉panda等數(shù)據(jù)處理工具優(yōu)先；
4.熟悉常見反爬策略，有JavaScript反爬.抓包分析.IP封鎖等領(lǐng)域經(jīng)驗的優(yōu)先；
5.理解TCP/IP.HTTP.以及各類WEB登錄認(rèn)證的機制；
6.有爬取電商平臺如Amazon.eBay.天貓.京東經(jīng)驗者優(yōu)先；
7.善于主動學(xué)習(xí)，責(zé)任心強，良好的溝通表達(dá)能力。
三、所需技能：
數(shù)據(jù)分析、Python、Redis、Pandas、跨境電商、MySQL、爬蟲、反爬技術(shù)、 網(wǎng)絡(luò)爬蟲技術(shù)、分布式技術(shù)、Java、大數(shù)據(jù)、構(gòu)建團(tuán)隊
查看全部

工作地點

成都武侯區(qū)四川小牛筑訊科技有限公司

職位發(fā)布者

閆晗/人事經(jīng)理

當(dāng)前在線
立即溝通