職位描述
爬蟲開發(fā)數(shù)據(jù)采集互聯(lián)網(wǎng)計算機軟件
崗位職責(zé)：
1.負(fù)責(zé)設(shè)計和開發(fā)分布式爬蟲系統(tǒng)，進(jìn)行多平臺多終端信息的抓取和分析；
2.建立完整的數(shù)據(jù)獲取、解析、入庫和監(jiān)控流程，優(yōu)化系統(tǒng)瓶頸，不斷迭代完善；
3.有驗證碼破解、反扒、分布式爬蟲架構(gòu)經(jīng)驗；
4.研究優(yōu)化算法，提升爬蟲系統(tǒng)的穩(wěn)定性和可擴展性；
5.快速支撐產(chǎn)品所需數(shù)據(jù)落地；
任職要求：
1.2年以上工作經(jīng)驗，計算機、電子、數(shù)學(xué)、統(tǒng)計學(xué)等相關(guān)專業(yè)及本科以上學(xué)歷；
2.基礎(chǔ)扎實，熟練使用pyth或Java，熟悉linux對應(yīng)的開發(fā)環(huán)境
3.熟悉反扒機制；
4.精通爬蟲原理、熟悉scrapy、pyspider等框架；
5.熟悉mysql等數(shù)據(jù)庫
6.優(yōu)秀的分析、解決問題能力，對未知的、挑戰(zhàn)性問題充滿激情；
7.人品正直，有原則，有一顆奮斗拼搏的心。
1.負(fù)責(zé)設(shè)計和開發(fā)分布式爬蟲系統(tǒng)，進(jìn)行多平臺多終端信息的抓取和分析；
2.建立完整的數(shù)據(jù)獲取、解析、入庫和監(jiān)控流程，優(yōu)化系統(tǒng)瓶頸，不斷迭代完善；
3.有驗證碼破解、反扒、分布式爬蟲架構(gòu)經(jīng)驗；
4.研究優(yōu)化算法，提升爬蟲系統(tǒng)的穩(wěn)定性和可擴展性；
5.快速支撐產(chǎn)品所需數(shù)據(jù)落地；
任職要求：
1.2年以上工作經(jīng)驗，計算機、電子、數(shù)學(xué)、統(tǒng)計學(xué)等相關(guān)專業(yè)及本科以上學(xué)歷；
2.基礎(chǔ)扎實，熟練使用pyth或Java，熟悉linux對應(yīng)的開發(fā)環(huán)境
3.熟悉反扒機制；
4.精通爬蟲原理、熟悉scrapy、pyspider等框架；
5.熟悉mysql等數(shù)據(jù)庫
6.優(yōu)秀的分析、解決問題能力，對未知的、挑戰(zhàn)性問題充滿激情；
7.人品正直，有原則，有一顆奮斗拼搏的心。
工作地點
杭州西湖區(qū)華策中心A座6樓
相似職位
- 爬蟲工程師1-1.7萬
杭州 - 臨安
杭州博客健醫(yī)藥有限公司 - 爬蟲工程師1.4-1.5萬
杭州 - 余杭
博彥科技承德有限公司 - 爬蟲工程師（外派大廠，雙休，五險一金）1.3-1.5萬
杭州 - 余杭
軟通動力信息技術(shù)(集團(tuán))股份有限公司 - python爬蟲工程師1.1-1.6萬
杭州 - 濱江
軟通動力信息技術(shù)(集團(tuán))股份有限公司 - PH工程師6000-8000元
杭州 - 西湖
杭州微風(fēng)企科技有限公司 - 爬蟲工程師-外派互聯(lián)網(wǎng)大廠1.3-1.5萬
杭州 - 余杭
軟通動力信息技術(shù)(集團(tuán))股份有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團(tuán)招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風(fēng)汽車招聘
- 長城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長鑫存儲招聘
- 天江藥業(yè)招聘
- 藍(lán)月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- 海康威視招聘
- 寧德時代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團(tuán)招聘
- 中國移動招聘
- 中國聯(lián)通招聘
- 中國電信招聘
- 中糧集團(tuán)招聘
- 國藥控股招聘
- 中廣核招聘
- 中國船舶招聘
- 強生中國招聘
- 匯豐中國招聘
- 宜家招聘
- 立邦中國招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
sunny/招聘
立即溝通
杭州微風(fēng)企科技有限公司嘉興微風(fēng)數(shù)信信息技術(shù)有限公司是杭州微風(fēng)企的全資子公司，杭州微風(fēng)企科技有限公司成立于2018年07月，四年里我們的業(yè)務(wù)主營收入從零做到了一個億，這四年里我們是國家高薪技術(shù)企業(yè)，國家科技型企業(yè)，杭州市“雛鷹計劃”企業(yè)，浙江省雙軟企業(yè)認(rèn)證等等。2022年我們成功在上海數(shù)據(jù)交易所掛牌上市，九月份引入上海涌鏵系資本完成A輪融資！公司計劃用五年的時間成功在主板上市！杭州微風(fēng)企科技有限公司是針對企業(yè)經(jīng)營數(shù)據(jù)應(yīng)用的創(chuàng)新性的科技公司，應(yīng)用方向包括信貸管理、智能審批、智能審計、經(jīng)濟分析、行業(yè)咨詢等等。我們的客戶群體非常廣泛包括銀行、保理、行業(yè)協(xié)會、會計事務(wù)所、第三方企服機構(gòu)，政府等等，公司不僅有正常的法定薪酬福利，法定節(jié)假日，全員的業(yè)績補貼，還有股權(quán)激勵、專業(yè)培訓(xùn)、定時的活動聚餐等等，你也許就是公司合伙人。
公司主頁