爬蟲(chóng)工程師
1.8-2.2萬(wàn)元/月【崗位職責(zé)】
1、負(fù)責(zé)網(wǎng)頁(yè)爬取、數(shù)據(jù)解析、數(shù)據(jù)提交的工作。
2、負(fù)責(zé)設(shè)計(jì)爬蟲(chóng)策略及反爬規(guī)則,提升數(shù)據(jù)采集效率、完整度和穩(wěn)定性。
3、負(fù)責(zé)智能采集系統(tǒng)設(shè)計(jì)與研發(fā),如采集任務(wù)調(diào)度,頁(yè)面解析和結(jié)構(gòu)化抽取。
4、負(fù)責(zé)持續(xù)跟蹤分析爬蟲(chóng)系統(tǒng)的技術(shù)缺陷,對(duì)策略架構(gòu)做出合理地調(diào)整和改進(jìn),提升公司相關(guān)產(chǎn)品與服務(wù)的競(jìng)爭(zhēng)力。
【任職資格】
1、具備至少3年爬蟲(chóng)開(kāi)發(fā)經(jīng)驗(yàn),能夠獨(dú)立承擔(dān)爬蟲(chóng)相關(guān)工作。
2、熟悉網(wǎng)絡(luò)協(xié)議,掌握反爬風(fēng)控策略,可從協(xié)議、設(shè)備、網(wǎng)絡(luò)指紋、行為、擬人化等多角度處理風(fēng)控問(wèn)題。
3、熟悉Web網(wǎng)頁(yè)數(shù)據(jù)的注入與抓取,掌握逆向算法還原、協(xié)議破解以及驗(yàn)證碼識(shí)別(如點(diǎn)選驗(yàn)證碼、滑塊驗(yàn)證碼、ReCaptcha、Cloudflare驗(yàn)證碼等),且至少有一個(gè)成功識(shí)別并繞過(guò)驗(yàn)證碼的案例。
4、熟練掌握Docker、Linux、Redis等相關(guān)技術(shù)。
5、熟練運(yùn)用JS逆向、AST解混淆、協(xié)議分發(fā)、Webpack補(bǔ)環(huán)境、XML與OB混淆、RPC等技術(shù)手段。
6、熟練掌握Selenium、DP等至少一種爬蟲(chóng)自動(dòng)化技術(shù),熟悉Scrapy、Feapder、Asyncio等至少一種爬蟲(chóng)技術(shù)及其原理。
7、有海外網(wǎng)站爬取經(jīng)驗(yàn)者優(yōu)先。
【薪酬福利】
1、上班時(shí)間:9:00--18:30,午休時(shí)間為12:30--14:00,雙休
2、每周定期下午茶,工作環(huán)境輕松舒適
3、享受國(guó)家法定節(jié)假日休息
4、薪資結(jié)構(gòu)為固定薪資

深圳南山區(qū)科興科學(xué)園A1單元
相關(guān)推薦查看更多 >
深圳
相同職位推薦
企業(yè)招聘