崗位職責(zé):
1、負(fù)責(zé)公司離線及實(shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù)/數(shù)據(jù)湖的設(shè)計(jì)與開(kāi)發(fā),保證所有數(shù)據(jù)實(shí)時(shí)抽取/匯聚到數(shù)據(jù)湖;
2、根據(jù)業(yè)務(wù)數(shù)據(jù)分析進(jìn)行數(shù)倉(cāng)數(shù)據(jù)模型的設(shè)計(jì)與開(kāi)發(fā),與大數(shù)據(jù)和開(kāi)發(fā)團(tuán)隊(duì)協(xié)作進(jìn)行數(shù)據(jù)底座平臺(tái)的設(shè)計(jì)和開(kāi)發(fā)工作,推動(dòng)業(yè)務(wù)部門(mén)的數(shù)據(jù)化運(yùn)營(yíng);
3、為公司平臺(tái)所有系統(tǒng)級(jí)數(shù)據(jù)中臺(tái)提供數(shù)據(jù)集市和主題層的數(shù)據(jù)服務(wù),參與公司數(shù)據(jù)產(chǎn)品及應(yīng)用項(xiàng)目開(kāi)發(fā)建設(shè);
任職要求:
1 、從事數(shù)據(jù)倉(cāng)庫(kù)開(kāi)發(fā)領(lǐng)域至少5年以上,熟悉數(shù)據(jù)倉(cāng)庫(kù)模型設(shè)計(jì)與ETL開(kāi)發(fā)經(jīng)驗(yàn),掌握維度建模設(shè)計(jì)方法,具備實(shí)時(shí)數(shù)倉(cāng)架構(gòu)設(shè)計(jì)及開(kāi)發(fā)相關(guān)經(jīng)驗(yàn);
2 、精通數(shù)據(jù)倉(cāng)庫(kù)領(lǐng)域知識(shí)體系和技能,對(duì)數(shù)據(jù)采集、數(shù)據(jù)抽取、數(shù)倉(cāng)分層架構(gòu)、數(shù)據(jù)湖架構(gòu)及應(yīng)用、湖倉(cāng)一體的實(shí)時(shí)數(shù)倉(cāng)的設(shè)計(jì)和實(shí)施有比較豐富的經(jīng)驗(yàn);
3、精通數(shù)據(jù)模型的設(shè)計(jì),深入理解離線、實(shí)時(shí)數(shù)倉(cāng)及流批一體架構(gòu)選型的技術(shù)特點(diǎn),能夠根據(jù)業(yè)務(wù)要求選擇合適的技術(shù)棧,搭建符合公司平臺(tái)要求的數(shù)據(jù)底座基礎(chǔ)設(shè)施;
4、熟練掌握f(shuō)link、kafka、spark、hive、hbase等流式/批式處理引擎或技術(shù);
5、精通SQL,有一定的SQL性能調(diào)優(yōu)經(jīng)驗(yàn),熟練掌握mysql等數(shù)據(jù)庫(kù)的應(yīng)用和接口開(kāi)發(fā)優(yōu)化;
6、精通java/python/shell/Scala其中至少一門(mén)語(yǔ)言;
7、具有電商行業(yè)經(jīng)驗(yàn)或者互聯(lián)網(wǎng)相關(guān)經(jīng)驗(yàn),有業(yè)務(wù)sense,能夠通過(guò)梳理設(shè)計(jì)數(shù)據(jù)模型發(fā)現(xiàn)開(kāi)發(fā)及產(chǎn)品業(yè)務(wù)問(wèn)題,并驅(qū)動(dòng)業(yè)務(wù)目標(biāo)實(shí)現(xiàn);
8、性格積極樂(lè)觀,誠(chéng)信,積極分享成果,有較強(qiáng)的語(yǔ)言表達(dá)能力;具備強(qiáng)烈的進(jìn)取心、求知欲及團(tuán)隊(duì)合作精神。