【該崗位是字節(jié)外包,要求具備互聯(lián)網(wǎng)數(shù)倉背景,學信網(wǎng)可查本科學歷】
熟悉:Spark Hive Hadoop Presto&Python加分。
崗位職責:
1、負責數(shù)據(jù)同步任務全生命周期的統(tǒng)一運維,涵蓋任務創(chuàng)建、執(zhí)行監(jiān)控、問題解決及資源調(diào)優(yōu)等核心環(huán)節(jié)
2、基于實際運維經(jīng)驗提煉通用規(guī)范,逐步降低運維成本
技術要求:
1、熟悉 Spark job 常見運維手段,具備 Spark 日志(如 Spark UI、Log 等)分析能力
2、具備 Python/Shell 編寫能力,可以自主開發(fā)小型腳本輔助提高工作效率;