爬蟲工程師
1.8-2.2萬元/月【崗位職責】
1、負責網(wǎng)頁爬取、數(shù)據(jù)解析、數(shù)據(jù)提交的工作。
2、負責設計爬蟲策略及反爬規(guī)則,提升數(shù)據(jù)采集效率、完整度和穩(wěn)定性。
3、負責智能采集系統(tǒng)設計與研發(fā),如采集任務調度,頁面解析和結構化抽取。
4、負責持續(xù)跟蹤分析爬蟲系統(tǒng)的技術缺陷,對策略架構做出合理地調整和改進,提升公司相關產品與服務的競爭力。
【任職資格】
1、具備至少3年爬蟲開發(fā)經驗,能夠獨立承擔爬蟲相關工作。
2、熟悉網(wǎng)絡協(xié)議,掌握反爬風控策略,可從協(xié)議、設備、網(wǎng)絡指紋、行為、擬人化等多角度處理風控問題。
3、熟悉Web網(wǎng)頁數(shù)據(jù)的注入與抓取,掌握逆向算法還原、協(xié)議破解以及驗證碼識別(如點選驗證碼、滑塊驗證碼、ReCaptcha、Cloudflare驗證碼等),且至少有一個成功識別并繞過驗證碼的案例。
4、熟練掌握Docker、Linux、Redis等相關技術。
5、熟練運用JS逆向、AST解混淆、協(xié)議分發(fā)、Webpack補環(huán)境、XML與OB混淆、RPC等技術手段。
6、熟練掌握Selenium、DP等至少一種爬蟲自動化技術,熟悉Scrapy、Feapder、Asyncio等至少一種爬蟲技術及其原理。
7、有海外網(wǎng)站爬取經驗者優(yōu)先。
【薪酬福利】
1、上班時間:9:00--18:30,午休時間為12:30--14:00,雙休
2、每周定期下午茶,工作環(huán)境輕松舒適
3、享受國家法定節(jié)假日休息
4、薪資結構為固定薪資

深圳南山區(qū)科興科學園A1單元
相關推薦查看更多 >
深圳
相同職位推薦
企業(yè)招聘