崗位職責
1. 基于Java技術棧，負責大數(shù)據(jù)平臺核心模塊開發(fā)、迭代與維護，參與離線計算、實時計算任務的編碼、測試與上線，保障服務高可用、高穩(wěn)定。
2. 負責數(shù)據(jù)倉庫分層開發(fā)（ODS/DWD/DWS/ADS），基于Java+SQL完成數(shù)據(jù)抽取、清洗、轉換、加載（ETL）任務開發(fā)，優(yōu)化ETL作業(yè)性能，解決數(shù)據(jù)處理過程中的異常問題。
3. 熟練運用Hadoop、Spark、Flink、Kafka等大數(shù)據(jù)組件，結合Java語言進行二次開發(fā)、任務調度與優(yōu)化，解決數(shù)據(jù)傾斜、任務延遲等常見問題。
4. 配合架構師完成大數(shù)據(jù)平臺技術方案落地，參與技術選型討論、代碼評審，遵循團隊編碼規(guī)范，沉淀開發(fā)文檔與技術組件。
5. 對接業(yè)務部門，深入理解業(yè)務需求，將業(yè)務需求轉化為大數(shù)據(jù)開發(fā)方案，開發(fā)數(shù)據(jù)接口、數(shù)據(jù)報表，支撐業(yè)務數(shù)據(jù)驅動決策。
6. 負責線上大數(shù)據(jù)任務的日常監(jiān)控、運維排查，快速響應并解決線上故障，保障數(shù)據(jù)處理的及時性與準確性。
7. 關注Java技術棧與大數(shù)據(jù)領域前沿技術，主動學習并落地優(yōu)化，提升開發(fā)效率與系統(tǒng)性能。
任職要求
1. 本科及以上學歷，計算機相關專業(yè)，3年以上大數(shù)據(jù)開發(fā)經(jīng)驗，精通Java開發(fā)（核心要求），熟練掌握Java基礎、集合、多線程、IO、反射等核心知識點，具備扎實的Java編碼功底。
2. 精通大數(shù)據(jù)核心組件：熟練使用Hadoop（HDFS、MapReduce、YARN）、Spark（Spark Core、Spark SQL）、Flink，能獨立完成離線/實時任務開發(fā)與調優(yōu)；熟悉Kafka、HBase、ClickHouse、Doris等組件優(yōu)先。
3. 熟練掌握ETL開發(fā)流程與技巧，精通SQL優(yōu)化，能獨立完成數(shù)據(jù)倉庫分層建模與開發(fā)，有海量數(shù)據(jù)處理經(jīng)驗者優(yōu)先。
4. 熟悉Linux系統(tǒng)操作，能熟練編寫Shell腳本；了解Maven、Git等開發(fā)工具，掌握SpringBoot、MyBatis等JavaWeb框架者優(yōu)先。
5. 具備良好的問題分析與解決能力，能獨立排查開發(fā)、運維過程中的技術故障；有較強的責任心與抗壓能力，具備良好的溝通協(xié)調能力和團隊協(xié)作精神。
6. 熟悉數(shù)據(jù)治理、數(shù)據(jù)質量監(jiān)控相關流程，有金融、電商、互聯(lián)網(wǎng)行業(yè)大數(shù)據(jù)開發(fā)經(jīng)驗者優(yōu)先。