爬蟲工程師
1.8-2.2萬元/月【崗位職責(zé)】
1、負(fù)責(zé)網(wǎng)頁爬取、數(shù)據(jù)解析、數(shù)據(jù)提交的工作。
2、負(fù)責(zé)設(shè)計(jì)爬蟲策略及反爬規(guī)則,提升數(shù)據(jù)采集效率、完整度和穩(wěn)定性。
3、負(fù)責(zé)智能采集系統(tǒng)設(shè)計(jì)與研發(fā),如采集任務(wù)調(diào)度,頁面解析和結(jié)構(gòu)化抽取。
4、負(fù)責(zé)持續(xù)跟蹤分析爬蟲系統(tǒng)的技術(shù)缺陷,對(duì)策略架構(gòu)做出合理地調(diào)整和改進(jìn),提升公司相關(guān)產(chǎn)品與服務(wù)的競(jìng)爭(zhēng)力。
【任職資格】
1、具備至少3年爬蟲開發(fā)經(jīng)驗(yàn),能夠獨(dú)立承擔(dān)爬蟲相關(guān)工作。
2、熟悉網(wǎng)絡(luò)協(xié)議,掌握反爬風(fēng)控策略,可從協(xié)議、設(shè)備、網(wǎng)絡(luò)指紋、行為、擬人化等多角度處理風(fēng)控問題。
3、熟悉Web網(wǎng)頁數(shù)據(jù)的注入與抓取,掌握逆向算法還原、協(xié)議破解以及驗(yàn)證碼識(shí)別(如點(diǎn)選驗(yàn)證碼、滑塊驗(yàn)證碼、ReCaptcha、Cloudflare驗(yàn)證碼等),且至少有一個(gè)成功識(shí)別并繞過驗(yàn)證碼的案例。
4、熟練掌握Docker、Linux、Redis等相關(guān)技術(shù)。
5、熟練運(yùn)用JS逆向、AST解混淆、協(xié)議分發(fā)、Webpack補(bǔ)環(huán)境、XML與OB混淆、RPC等技術(shù)手段。
6、熟練掌握Selenium、DP等至少一種爬蟲自動(dòng)化技術(shù),熟悉Scrapy、Feapder、Asyncio等至少一種爬蟲技術(shù)及其原理。
7、有海外網(wǎng)站爬取經(jīng)驗(yàn)者優(yōu)先。
【薪酬福利】
1、上班時(shí)間:9:00--18:30,午休時(shí)間為12:30--14:00,雙休
2、每周定期下午茶,工作環(huán)境輕松舒適
3、享受國(guó)家法定節(jié)假日休息
4、薪資結(jié)構(gòu)為固定薪資

深圳南山區(qū)科興科學(xué)園A1單元
相關(guān)推薦查看更多 >
廣州花都區(qū)招頂班指揮/司索工拆外架220一天不包吃,10天或者半個(gè)月左右.9小時(shí)后加班費(fèi)2
220元/天陽江陽東區(qū)養(yǎng)豬場(chǎng)招長(zhǎng)期水電維修工,一定要會(huì)燒焊,除專業(yè)水電維修技能外
面議揭陽揭西縣招泥瓦工、抹灰、砌磚/石、工地小工/雜工
面議深圳寶安區(qū)招廣告安裝大工兩人
面議深圳
相同職位推薦
企業(yè)招聘