工作職責(zé):
1、數(shù)據(jù)倉(cāng)庫(kù)規(guī)劃與實(shí)施:參與公司數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與實(shí)施,確保數(shù)據(jù)準(zhǔn)確、及時(shí)地支持業(yè)務(wù)決策;
2、全量 & 增量數(shù)據(jù)接入:負(fù)責(zé)集團(tuán)全鏈路系統(tǒng)數(shù)據(jù)的全量/增量接入,具備保障日均 1000+ 任務(wù)成功率 ≥ 99% 的實(shí)戰(zhàn)經(jīng)驗(yàn);
3、平臺(tái)穩(wěn)定性與性能治理:數(shù)據(jù)平臺(tái)性能與作業(yè)監(jiān)控,具備把單表 千萬(wàn)行 T+1 離線同步時(shí)長(zhǎng)優(yōu)化的實(shí)戰(zhàn)經(jīng)驗(yàn);
4、自動(dòng)化腳本:通過(guò)腳本或工具把重復(fù)動(dòng)作(建表、映射、調(diào)度、校驗(yàn)、血緣)變成一鍵完成;
5、數(shù)據(jù)質(zhì)量前置技術(shù)調(diào)研與實(shí)施:持續(xù)關(guān)注大數(shù)據(jù)領(lǐng)域的前沿技術(shù),與團(tuán)隊(duì)共同調(diào)研并實(shí)踐如數(shù)據(jù)湖、Flinkcdc、實(shí)時(shí)數(shù)倉(cāng)等熱門(mén)技術(shù),保持公司的技術(shù)領(lǐng)先地位;
任職要求:
1、技術(shù)能力:精通Linux操作系統(tǒng),熟練掌握至少一種主流編程語(yǔ)言(如Shell + Python/Java);
2、項(xiàng)目經(jīng)驗(yàn):具有5年以上數(shù)據(jù)倉(cāng)庫(kù)、ETL、大數(shù)據(jù)開(kāi)發(fā)等相關(guān)項(xiàng)目經(jīng)驗(yàn),主導(dǎo)過(guò) 5 個(gè)以上業(yè)務(wù)系統(tǒng)對(duì)接;
3、技術(shù)棧:深入了解大數(shù)據(jù)處理技術(shù)棧,如Hadoop、Spark、Hive等,并能熟練掌握DataX、DolphinScheduler、Flink、Doris、Clickhouse等工具;
4、數(shù)據(jù)建模能力:具備扎實(shí)的數(shù)據(jù)建模基礎(chǔ),能夠?qū)?fù)雜業(yè)務(wù)需求拆解為可執(zhí)行的數(shù)據(jù)建模任務(wù),并根據(jù)業(yè)務(wù)邏輯進(jìn)行數(shù)據(jù)分層設(shè)計(jì);
5、行業(yè)經(jīng)驗(yàn):對(duì)零售、供應(yīng)鏈、財(cái)務(wù)等業(yè)務(wù)場(chǎng)景有理解,能把業(yè)務(wù)問(wèn)題翻譯成數(shù)據(jù)語(yǔ)言。
6、本科學(xué)歷及以上。