崗位職責(zé):
根據(jù)現(xiàn)有及規(guī)劃中的數(shù)據(jù)運(yùn)營業(yè)務(wù),設(shè)計(jì)數(shù)據(jù)運(yùn)營管理平臺,主要是鑒權(quán)、授權(quán)管理、計(jì)數(shù)管理、接口管理,日常對外的對接調(diào)試管理等內(nèi)容。負(fù)責(zé)數(shù)據(jù)運(yùn)營平臺的設(shè)計(jì),并推動(dòng)開發(fā)落地。
崗位要求:
1、掌握mysql、oracle、postgresql等一種或多種數(shù)據(jù)庫,會編寫函數(shù)、存儲過程,能進(jìn)行數(shù)據(jù)庫查詢性能調(diào)優(yōu)和常見問題處理;
2、熟悉常用etl工具,如datastage、kettle、datax,能使用工具進(jìn)行數(shù)據(jù)的處理;
3、熟悉大數(shù)據(jù)相關(guān)技術(shù),對hadoop(hdfs/mapreduce/hive/hbase)生態(tài)有所了解,了解常用數(shù)據(jù)接入組件datax、sqoop、flumen等一種或多種;
4、掌握一種或多種計(jì)算框架和消息隊(duì)列:spark、flink、kafka等;
5、掌握greenplum、doris等一種或多種olap數(shù)據(jù)庫,進(jìn)行相關(guān)模型的設(shè)計(jì)和數(shù)據(jù)管理;掌握python、java、scala等一種或多種編程語言;熟悉數(shù)據(jù)需求分析、數(shù)據(jù)探查、數(shù)據(jù)模型設(shè)計(jì)、元數(shù)據(jù)管理、數(shù)據(jù)標(biāo)準(zhǔn)管理、數(shù)據(jù)質(zhì)量管理等理論方法,會使用工具(powerdesigne、pdmaner)進(jìn)行數(shù)據(jù)模型設(shè)計(jì)和關(guān)系圖梳理;
6、具有多個(gè)數(shù)據(jù)倉庫開發(fā)項(xiàng)目經(jīng)驗(yàn),熟悉數(shù)據(jù)分析展示工具,具有實(shí)際數(shù)據(jù)可視化開發(fā)項(xiàng)目經(jīng)驗(yàn);
7、具備團(tuán)隊(duì)協(xié)作和溝通能力,能夠與其他成員溝通協(xié)作,共同推進(jìn)數(shù)據(jù)工程項(xiàng)目;