工作內(nèi)容:
1、負(fù)責(zé)設(shè)計(jì)和開發(fā)App端與網(wǎng)頁端的自動(dòng)化爬蟲系統(tǒng),實(shí)現(xiàn)訂單信息的自動(dòng)錄入;
2、研究并繞過主流平臺(如電商、物流、供應(yīng)鏈系統(tǒng))的反爬機(jī)制,保障數(shù)據(jù)抓取的穩(wěn)定性與準(zhǔn)確性;實(shí)現(xiàn)定時(shí)任務(wù)調(diào)度、異常處理、日志記錄與數(shù)據(jù)校驗(yàn)機(jī)制,確保錄單流程全自動(dòng)化、可追溯;與業(yè)務(wù)團(tuán)隊(duì)協(xié)作,理解錄單邏輯,持續(xù)優(yōu)化錄單準(zhǔn)確率與效率;維護(hù)已有爬蟲系統(tǒng),適配目標(biāo)平臺接口或頁面結(jié)構(gòu)變更。
任職要求:
1、熟練掌握Python編程,熟悉主流爬蟲框架(如Scrapy、Selenium、Playwright、Pyppeteer等);熟悉App端數(shù)據(jù)抓取技術(shù),具備使用uiautomator2、Appium、mitmproxy、Frida等工具的經(jīng)驗(yàn);
2、熟悉網(wǎng)頁端數(shù)據(jù)抓取,能處理JS渲染、接口加密、驗(yàn)證碼、滑塊等反爬機(jī)制;熟悉常見數(shù)據(jù)庫(MySQL、MongoDB、Redis),能設(shè)計(jì)合理的數(shù)據(jù)存儲(chǔ)結(jié)構(gòu);具備良好的代碼規(guī)范、文檔編寫習(xí)慣,能獨(dú)立承擔(dān)項(xiàng)目開發(fā)任務(wù);
3、有自動(dòng)化錄單、RPA、電商訂單同步等相關(guān)項(xiàng)目經(jīng)驗(yàn)者優(yōu)先;具備較強(qiáng)的責(zé)任心與溝通能力,能主動(dòng)推進(jìn)項(xiàng)目落地。
加分項(xiàng):
有逆向工程經(jīng)驗(yàn),能分析App通信協(xié)議或加密邏輯;
熟悉Linux部署、Docker容器化、任務(wù)調(diào)度平臺(如Celery、Airflow);
有團(tuán)隊(duì)管理經(jīng)驗(yàn),能帶領(lǐng)小組完成復(fù)雜項(xiàng)目。
薪資范圍:
面議(根據(jù)經(jīng)驗(yàn)與能力,提供具有競爭力的薪酬)
工作福利:
彈性工作時(shí)間,支持遠(yuǎn)程辦公
技術(shù)成長空間大,鼓勵(lì)嘗試新技術(shù)項(xiàng)目獎(jiǎng)金+年終分紅