高級爬蟲工程師20-40k·14薪
公司名稱:某大型科技有限公司
工作地點:北京
職位描述:
分布式爬蟲開發
負責爬蟲算法/反爬策略/代理IP優化研究及落地實施,提高爬取實時性、成功率
對抓取后的數據進行清洗、存儲等,并持續優化平臺
負責爬蟲自動化平臺的開發和持續優化
任職資格:
熟悉常用的爬蟲技術及架構,具有一定的反爬分析對抗能力,2年及以上爬蟲經驗
有大型電商/直播/社媒/本地生活平臺爬取經驗,Android/iOS14逆向破解經驗者優先
熟練使用Scrapy、Redis、MongoDB、Mysql、Git
熟悉Linux開發環境,熟悉Python、 熟悉Selenium、Pyppeteer
-
在線客服
-
QQ客服
-
微信客服
-
返回頂部