?1、負責(zé)各類主流電商平臺數(shù)據(jù)抓取和維護; 2、設(shè)計爬蟲策略和防屏蔽規(guī)則,提升網(wǎng)頁抓取的效率和質(zhì)量,解決爬蟲遇到的各種反爬問題; 3、負責(zé)爬蟲數(shù)據(jù)的清洗,存儲等大數(shù)據(jù)開發(fā)工作; 4、與產(chǎn)品經(jīng)理、下游團隊等部門人員溝通,對外提供各種服務(wù)完成整體業(yè)務(wù)需求達成業(yè)務(wù)目標(biāo)。
任職要求
?1、本科及以上學(xué)歷,計算機科學(xué)、數(shù)據(jù)科學(xué)相關(guān)專業(yè)背景優(yōu)先; 2、2年以上經(jīng)驗,有大規(guī)模數(shù)據(jù)處理和復(fù)雜數(shù)據(jù)模型的經(jīng)驗; 3、熟練掌握編程語言,如Python、sql、海豚等; 4、具備代碼調(diào)試、環(huán)境部署、任務(wù)調(diào)度等能力; 5、熟悉主流電商平臺相關(guān)數(shù)據(jù)平臺的操作(如生意參謀、數(shù)據(jù)銀行、巨量云圖等)為加分項。