?1、負(fù)責(zé)各類(lèi)主流電商平臺(tái)數(shù)據(jù)抓取和維護(hù); 2、設(shè)計(jì)爬蟲(chóng)策略和防屏蔽規(guī)則,提升網(wǎng)頁(yè)抓取的效率和質(zhì)量,解決爬蟲(chóng)遇到的各種反爬問(wèn)題; 3、負(fù)責(zé)爬蟲(chóng)數(shù)據(jù)的清洗,存儲(chǔ)等大數(shù)據(jù)開(kāi)發(fā)工作; 4、與產(chǎn)品經(jīng)理、下游團(tuán)隊(duì)等部門(mén)人員溝通,對(duì)外提供各種服務(wù)完成整體業(yè)務(wù)需求達(dá)成業(yè)務(wù)目標(biāo)。
任職要求
?1、本科及以上學(xué)歷,計(jì)算機(jī)科學(xué)、數(shù)據(jù)科學(xué)相關(guān)專(zhuān)業(yè)背景優(yōu)先; 2、2年以上經(jīng)驗(yàn),有大規(guī)模數(shù)據(jù)處理和復(fù)雜數(shù)據(jù)模型的經(jīng)驗(yàn); 3、熟練掌握編程語(yǔ)言,如Python、sql、海豚等; 4、具備代碼調(diào)試、環(huán)境部署、任務(wù)調(diào)度等能力; 5、熟悉主流電商平臺(tái)相關(guān)數(shù)據(jù)平臺(tái)的操作(如生意參謀、數(shù)據(jù)銀行、巨量云圖等)為加分項(xiàng)。