職位描述
數(shù)據(jù)爬蟲數(shù)據(jù)抽取反爬蟲分布式爬蟲Python互聯(lián)網(wǎng)食品/飲料計算機(jī)軟件
崗位職責(zé)：
1、發(fā)掘負(fù)責(zé)各種網(wǎng)頁、APP接口特點和規(guī)律，從事網(wǎng)頁及APP數(shù)據(jù)采集的技術(shù)研發(fā)工作；
2、負(fù)責(zé)設(shè)計爬蟲策略及防屏蔽規(guī)則，建設(shè)反爬對抗組件庫，提升網(wǎng)頁抓取的效率和質(zhì)量；
3、參與數(shù)據(jù)層建設(shè)，專注于垂直領(lǐng)域數(shù)據(jù)爬取，進(jìn)行多平臺信息的抓取和分析；
4、負(fù)責(zé)智能采集系統(tǒng)設(shè)計與研發(fā)，如采集任務(wù)調(diào)度，頁面解析和結(jié)構(gòu)化抽取，海量數(shù)據(jù)存儲和讀取等；
任職要求：
1、熟悉Linux操作系統(tǒng) ，熟練掌握Python，javascript，扎實的數(shù)據(jù)結(jié)構(gòu)和算法功底；
2、熟悉 scrapy、pyspider 等爬蟲框架；
3、熟悉各種爬蟲技術(shù)：adsl撥號、正則表達(dá)式、脫殼技術(shù)、加密、圖片破解、二維碼識別、滑塊驗證碼破解、httpClient、分布式爬蟲調(diào)度、代理ip調(diào)度算法、配置化爬蟲、授權(quán)爬蟲等；
4、熟悉常見的反爬蟲技術(shù)及其突破方案，對常見各類反爬方式（如賬號/IP封禁、驗證碼、js混淆加密、滑塊驗證、數(shù)據(jù)混淆等）有一定解決經(jīng)驗；
5、熟悉Mysql和NoSql（MongoDB，Redis，Hbase等）；
6、大專及以上學(xué)歷，計算機(jī)或統(tǒng)計學(xué)相關(guān)專業(yè)；
1、發(fā)掘負(fù)責(zé)各種網(wǎng)頁、APP接口特點和規(guī)律，從事網(wǎng)頁及APP數(shù)據(jù)采集的技術(shù)研發(fā)工作；
2、負(fù)責(zé)設(shè)計爬蟲策略及防屏蔽規(guī)則，建設(shè)反爬對抗組件庫，提升網(wǎng)頁抓取的效率和質(zhì)量；
3、參與數(shù)據(jù)層建設(shè)，專注于垂直領(lǐng)域數(shù)據(jù)爬取，進(jìn)行多平臺信息的抓取和分析；
4、負(fù)責(zé)智能采集系統(tǒng)設(shè)計與研發(fā)，如采集任務(wù)調(diào)度，頁面解析和結(jié)構(gòu)化抽取，海量數(shù)據(jù)存儲和讀取等；
任職要求：
1、熟悉Linux操作系統(tǒng) ，熟練掌握Python，javascript，扎實的數(shù)據(jù)結(jié)構(gòu)和算法功底；
2、熟悉 scrapy、pyspider 等爬蟲框架；
3、熟悉各種爬蟲技術(shù)：adsl撥號、正則表達(dá)式、脫殼技術(shù)、加密、圖片破解、二維碼識別、滑塊驗證碼破解、httpClient、分布式爬蟲調(diào)度、代理ip調(diào)度算法、配置化爬蟲、授權(quán)爬蟲等；
4、熟悉常見的反爬蟲技術(shù)及其突破方案，對常見各類反爬方式（如賬號/IP封禁、驗證碼、js混淆加密、滑塊驗證、數(shù)據(jù)混淆等）有一定解決經(jīng)驗；
5、熟悉Mysql和NoSql（MongoDB，Redis，Hbase等）；
6、大專及以上學(xué)歷，計算機(jī)或統(tǒng)計學(xué)相關(guān)專業(yè)；
查看全部
工作地點
合肥包河區(qū)加僑國際廣場B座5層（菜洋洋）
相似職位
- 2個月短期數(shù)據(jù)標(biāo)注崗-八小時周末雙休3000-4000元
合肥 - 蜀山
合肥錦繡教育 - 2個月短期數(shù)據(jù)標(biāo)注崗位-八小時周末雙休3000-4000元
合肥 - 蜀山
合肥錦繡教育 - 信息搜集員100-150元/天
合肥 - 蜀山
山東福瑞德國際會展集團(tuán)有限公司 合肥 - 蜀山
安徽省建筑設(shè)計研究總院股份有限公司- 地圖采集（可以帶薪旅游的工作~~）4000-6000元
合肥 - 蜀山
合肥點星辰科技有限公司 - 數(shù)據(jù)采集工程師（雙休+五險一金+補(bǔ)助+13薪）7000-10000元·13薪
合肥 - 蜀山
中紹宣科技集團(tuán)有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團(tuán)招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風(fēng)汽車招聘
- 長城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長鑫存儲招聘
- 天江藥業(yè)招聘
- 藍(lán)月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- ?？低曊衅?/a>
- 寧德時代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團(tuán)招聘
- 中國移動招聘
- 中國聯(lián)通招聘
- 中國電信招聘
- 中糧集團(tuán)招聘
- 國藥控股招聘
- 中廣核招聘
- 中國船舶招聘
- 強(qiáng)生中國招聘
- 匯豐中國招聘
- 宜家招聘
- 立邦中國招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
錢女士/HR
立即溝通
安徽菜洋洋信息科技有限公司菜洋洋品牌，創(chuàng)立于2019年，總部位于安徽省合肥市，是國內(nèi)食材供應(yīng)鏈及商用RTH（加熱即食）食材細(xì)分領(lǐng)域的領(lǐng)軍企業(yè)，年產(chǎn)值10億，擁有強(qiáng)大的規(guī)模實力與迅猛的發(fā)展速度。作為行業(yè)頭部企業(yè)，菜洋洋專注于餐飲半成品、料理包、速凍面點等產(chǎn)品的研發(fā)、生產(chǎn)和銷售。我們擁有自建1個產(chǎn)業(yè)園+現(xiàn)代化自有工廠3家及深度合作工廠30余家，并是其中10余家工廠的最大采購方，形成了顯著的產(chǎn)業(yè)規(guī)模效應(yīng)，確保了產(chǎn)品的高品質(zhì)和供應(yīng)鏈的穩(wěn)定性。同時，我們積累了900多種深受客戶喜愛的菜品，并保持每年菜品100種高速的新品研發(fā)迭代，持續(xù)引領(lǐng)行業(yè)發(fā)展。在銷售網(wǎng)絡(luò)方面，菜洋洋通過線上電商（涵蓋淘系、美菜、拼多多、抖音等平臺）和線下門店業(yè)務(wù)，構(gòu)建了綜合性的銷售體系，覆蓋全國大部分地區(qū)。近年來，公司業(yè)績持續(xù)保持高速增長，2019-2023年銷售年復(fù)合增長率持續(xù)超100%，成為多家頭部電商銷售平臺的佼佼者。在物流配送方面，我們已在全國主要省會及核心城市建立了50+個冷鏈運輸倉儲中心，并利用先進(jìn)的CRM+OMS+ERP+WMS+TMS信息系統(tǒng)，實現(xiàn)產(chǎn)品的高效交付，確保全國大部分城市今日訂明日達(dá)。菜洋洋通過其優(yōu)良的產(chǎn)品品質(zhì)和良好的消費者口碑獲得了“2023年度中國餐飲供應(yīng)鏈金番茄獎‘’“首屆中國餐飲供應(yīng)鏈TOP50,粉面供應(yīng)鏈TOP20‘’“美菜優(yōu)質(zhì)供應(yīng)商‘’“安徽省食品行業(yè)協(xié)會常務(wù)理事單位‘’“安徽省預(yù)制菜行業(yè)協(xié)會理事‘’等榮譽(yù)。截至目前，菜洋洋已服務(wù)超過三十余萬家餐飲商家，贏得了廣泛的市場認(rèn)可和信賴。我們擁有一支高學(xué)歷、高實踐經(jīng)驗的研發(fā)團(tuán)隊和近千人的精英團(tuán)隊，致力于為客戶提供靈活、個性化的供應(yīng)鏈解決方案。未來的伙伴，您將加入一個充滿活力、創(chuàng)新和機(jī)遇的大家庭。在這里，您將有機(jī)會與行業(yè)頂尖人才共事，參與前沿技術(shù)的研發(fā)和應(yīng)用，共同推動中國飲食安全和品質(zhì)的提升。菜洋洋期待您的加入，一起共創(chuàng)輝煌未來！
公司主頁